[发明专利]一种以图快速检索景点的方法及导游系统

说明书

本发明公开了一种以图快速检索景点的方法及导游系统，其通过在离线系统中对大规模带有地理标签的图像数据库进行处理，从图像数据集中提取出主题相册，并通过对主题相册内容的进一步去噪，筛选，并添加文字信息最终生成离线景点数据集。并通过生成快速索引结构以提高景点检索的速度。在在线系统中，通过构建查询图与景点数据之间的映射关系以及引入查询图相对于景点的相似度得分算法，并通过最终的打分排序获得检索结果。本发明构建了一个可以通过图像信息快速检索景点的方法，同时通过移动终端对景点信息的多角度展示(景点文字信息，景点相册，景点在地图上的位置标注，以及通过语音合成播报导游词等)为游客提供了完善的自助导游服务。

技术领域

本发明属于图像检索技术领域，涉及图像检索景点的方法，尤其是一种以图快速检索景点的方法，以及基于该方法的自助导游系统。

背景技术

随着生活水平的提高，旅游成为了人们在闲暇时间放松自己的不二选择。在2015年，我国共接待游客超过40亿人次。手机的快速发展使得游客在旅游过程中可以拍摄大量的图片并上传到图片分享网站与社交网络。知名的图片分享网站如Flickr，上传的图片总数达50亿张。社交网络中的图片上传量更为惊人，光Facebook一家就达到了600亿。在我国，微博，微信，以及各种旅游应用都是游客上传旅游图片与分享旅游经历的主要途径。但是，虽然我们已经拥有如此数量巨大的带标签以及GPS位置信息的图像数据库，目前的大部分旅游应用仅仅是对这些图像进行了存储，而没有有效的挖掘其中蕴含的大量信息。因此，对于如此大规模的图像多媒体数据，如何有效地挖掘这些丰富的多媒体数据信息，并利用这些信息以帮助游客在旅游过程中获取更加便捷的旅游体验是很有必要的。

在景点检索方面，目前主流的旅游应用仍然采用传统的利用文字标签进行检索的方式。使用文本进行景点检索时，会有一些不可避免的缺陷存在。文本检索是一种利用关键词检索的形式，这就要求用户对于检索的目标要有一定的基本知识，若用户对于要检索的目标一无所知，则用户无法选取合适的关键词来检索信息。文本检索的另一个缺陷就是关键词的重复使用率很高。对于很多单词，也许很多景点都会使用到，利用这种关键词进行检索往往会得到大量的检索结果，用户不得不从这些结果中手工挑选自己想要检索的目标，这种方式往往会费时费力，用户体验较差。同时由于图像附带的标签与描述是由用户添加上去的，人类思想的差异性难免使得这些标签带有很大的主观因素，为我们提取景点的客观属性引入噪声。另外，很多景点为了让搜索引擎更多的搜索到自己，会为自身添加很多不相关的关键词，使得用户获得的检索准确率降低。而使用图像信息来进行检索可以有效的避免这些问题。所以，利用图像进行景点检索是非常有必要的，另一方面，网络上的大规模图像多媒体资源，也为自动的通过图像内容进行景点检索提供了有利的条件。

随着科技的进步，人们智能手机和部分数码相机拍照时带有时间和GPS记录功能，因此，我们可以通过网络多媒体手段获取大量的带有地理位置标签的景点图像的。这就对使用图像进行景点检索提供了有利条件。

发明内容

本发明的目的在于克服上述现有技术的缺点，提供一种以图快速检索景点的方法及导游系统。

本发明的目的是通过以下技术方案来实现的：

这种以图快速检索景点的方法，包括以下步骤：

1)建立景点图像数据集

2)图像库预处理

计算数据集图像的平均亮度，分别去除亮度最高的1-3％的图片以及亮度最低的1-3％的图片；

去除不包含明确目标的图像；

3)图像视觉特征提取

对步骤2)处理后的景点图像数据集中每张图片采用SIFT特征描述子进行描述；所述SIFT特征是基于物体上的局部外观的兴趣点，与影像的大小和旋转无关；

4)生成主题相册