[发明专利]一种基于移动可视设备的跨媒体信息检索系统及方法

权利要求书

1.一种基于移动可视设备的跨媒体信息检索系统，其特征在于，包括：

图像输入模块，用于将图像输入到所述移动可视设备内；

文本输入模块，用于输入与图像相关的文字信息；

基于文本的互联网图像检索模块，用于检索出与输入的文字信息关联的图像集合，并建立生成文本相关的图像集；

基于内容的图像检索模块，在文本相关的图像集中通过检索与所输入图像匹配的图像，并建立生成视觉相关的图像集；

检索处理模块，用于从最终找到的视觉相关的图像集中的图像所在的网页中提取关键词，进而提取相关在线内容，并显示检索结果。

2.如权利要求1所述的系统，其特征在于，所述移动可视设备内置有摄像头，所述图像通过摄像头采集并传送到图像输入模块中。

3.如权利要求1或2所述的系统，其特征在于，所述移动可视设备为手机。

4.如权利要求1所述的系统，其特征在于，还包括查询扩展模块，所述查询扩展模块用于对所输入的文字信息进行扩展并将与所述文字信息同义的其他文字一起生成文本集，所述基于文本的互联网图像检索模块以所述文本集进行关联图像的检索。

5.一种基于移动可视设备的跨媒体信息检索方法，其特征在于，包括以下步骤：

步骤1：获取图像；

步骤2：输入与所述图像关联的文字信息；

步骤3：基于文本的互联网图像检索，即以所输入的文字信息为索引在互联网数据库中进行检索；

步骤4：提取并生成文本相关的图像集；

步骤5：基于内容的图像检索，在文本相关的图像集中检索与所述图像匹配的图像；

步骤6：提取并生成视觉相关的图像集；

步骤7：提取图像所在网页中的关键词；

步骤8：提取在线内容；

步骤9：显示检索结果。

6.如权利要求5所述的方法，其特征在于，所述移动可视设备内置有摄像头，所述步骤1中的图像通过所述摄像头获取。

7.如权利要求5或6所述的方法，其特征在于，所述移动可视设备为手机。

8.如权利要求5所述的方法，其特征在于，在基于文本的互联网图像检索的步骤之前还包括查询扩展步骤，所述查询扩展步骤对所输入的文字信息进行扩展并将与所述文字信息同义的其他文字一起生成文本集，所述基于文本的互联网图像检索步骤以所述文本集进行关联图像的检索。