[发明专利]媒介信息推送系统及其基于视觉特征的图文检索方法

权利要求书

1.一种基于视觉特征的图文检索方法，其特征在于，所述基于视觉特征的图文检索方法包括步骤：

获取用户输入的图文样本；

采用视觉图像搜索技术提取所述图文样本中的特征信息；

根据所述特征信息从预设的图像特征库中查找相匹配的媒介信息；

通过预定方式展示所述媒介信息。

2.根据权利要求1所述的基于视觉特征的图文检索方法，其特征在于，所述获取用户输入的图文样本的步骤，具体包括：

获取用户通过网络传输、本地上传、即时拍摄、即时工具绘制和/或临摹主色调绘制所输入的图文样本。

3.根据权利要求1所述的基于视觉特征的图文检索方法，其特征在于，所述采用视觉图像搜索技术提取所述图文样本中的特征信息的步骤，具体包括：

采用视觉图像搜索技术提取所述图文样本中包括图像像素的颜色属性和/或像素间的相互关系的特征信息，其中，所述图像像素的颜色属性或像素间的相互关系与所述图文样本之间建立有索引关系。

4.根据权利要求3所述的基于视觉特征的图文检索方法，其特征在于，所述采用视觉图像搜索技术提取所述图文样本中包括图像像素的颜色属性和/或像素间的相互关系的特征信息的步骤，具体包括：

采用视觉图像搜索技术提取所述图文样本中图像像素底层特征的颜色、纹理、形状的特征信息。

5.根据权利要求4所述的基于视觉特征的图文检索方法，其特征在于，所述采用视觉图像搜索技术提取所述图文样本中图像像素底层特征的颜色、纹理、形状的特征信息的步骤，还包括：

通过预设的图像语义模型对图像像素底层特征的颜色、纹理、形状进行语义识别，以得到具备抽象视觉特征的特征信息。

6.根据权利要求1所述的基于视觉特征的图文检索方法，其特征在于，所述根据所述特征信息从预设的图像特征库中查找相匹配的媒介信息的步骤，具体包括：

根据所述特征信息从预设的图像特征库中查找与之近似的多个媒介信息；

计算所述特征信息与所述多个媒介信息的特征相似度；

根据特征相似度对多个媒介信息进行优先排序。

7.根据权利要求6所述的基于视觉特征的图文检索方法，其特征在于，所述根据所述特征信息从预设的图像特征库中查找与之近似的多个媒介信息的步骤，具体包括：

根据技术领域的知识图谱提取特征信息的基本轮廓语义的关健字集合，并用关健字集合作为图像的语义特征向量，以进行图像语义检索。

8.根据权利要求7所述的基于视觉特征的图文检索方法，其特征在于，所述计算所述特征信息与所述多个媒介信息的特征相似度的步骤，具体包括：

对所述特征信息的图文样本与任一媒介信息的待匹配图像之间采用语义特征向量进行匹配计算，其中，所述特征信息的图文样本与任一媒介信息的待匹配图像之间采用语义特征向量进行匹配计算的距离测量公式包括：

其中，P、Q表示任意两副图像，n为关键字数。

9.根据权利要求1所述的基于视觉特征的图文检索方法，其特征在于，所述图文样本包括图像、视频和/或文档，所述媒介信息包括图像、视频和/或文档，所述根据所述特征信息从预设的图像特征库中查找相匹配的媒介信息的步骤，具体包括：

根据所述特征信息从公共网络、局域网络、博物馆、展览馆、社交媒体和/或同行网络的图像特征库中查找跨媒体的媒介信息。

10.一种媒介信息推送系统，其特征在于，其配置有处理器，所述处理器用于执行程序数据，以实现如权利要求1-9任一项所述的基于视觉特征的图文检索方法。