[发明专利]通过图像的任务聚焦搜索

说明书

背景技术

随着人们查看越来越多在线内容(特别是非文本内容，其包括图像、视频、音频等)，他们关于该内容好奇并且常常想要知道更多。例如，当人(计算机用户)查看同事的在线博客的内容时，计算机用户可能遇到他/她可能希望知道更多的图像。实际上，即使当图像被加字幕和/或周围的内容描述图像的主题的方面时，视图/计算机用户可能仍然具有未回答的问题，至少在未采取特定动作找到信息的情况下是未回答的。

备选地，计算机用户可能想要执行难以用词语制定的网络搜索任务，例如，通过其外表购买时尚物品、基于照片找到旅行目的地(或其他位置)等。通过图像搜索(对比通过文本搜索)是在这样的场景中进行的逻辑事情。许多这样的任务实际上是研究——人们在没有采集的明确目标的情况下搜索，而不是他们需要许多视觉辅助探索以形成意见并且变窄到确切地所追求的。一些提供商已经实现有时返回针对查询图像的文本注释的通用通过图像搜索(search-by-image)特征，但是搜索相关性和注释覆盖通常不是令人满意的。一些应用利用用于注释的人类众包并且呈现对应的文本搜索结果。注释常常是太模糊的，并且由于搜索结果基于文本注释，因而结果不是视觉中心的。通常，搜索结果的相关性不是令人满意的且非高效的，未提供交互式细化体验。还缺少的是使视觉搜索商品化并且实现有活力的生态系统的平台支持。

发明内容

本概述被提供以引入以在详细描述中下面进一步描述的简化形式的概念的选择。本概述不旨在标识要求保护的主题的关键特征或基本特征，其也不旨在被用于限制要求保护的主题的范围。

在一个方面中，提供了一种用于执行图像搜索的方法。从用户接收包括图像的搜索查询。标识与图像相关联的分段。标识与图像和分段相关联的用户意图。与所标识的分段和用户意图相关联的搜索结果被生成并且被呈现给用户。在此所描述的技术可以通过提供相关结果为用户提供更有效的搜索会话，而不需要多个搜索。

附图说明

所公开的主题的前述方面和许多伴随优点将随着其通过参考结合以下附图理解的以下描述而变得更容易理解，其中：

图1是描绘适于与在此所描述的技术的方面一起使用的示例性操作环境的高层示图；

图2图示了适于与在此所描述的技术的方面一起使用的用户计算设备与视觉搜索系统之间的示例性交互；

图3是图示适于与在此所描述的技术的方面一起使用的视觉搜索系统的示例性部件的块图；

图4图示了适于与在此所描述的技术的方面一起使用的示例性用户接口；

图5图示了适于与在此所描述的技术的方面一起使用的示例性用户接口；

图6图示了适于与在此所描述的技术的方面一起使用的示例性用户接口；

图7图示了适于与在此所描述的技术的方面一起使用的示例性高层工作流；以及

图8图示了适于与在此所描述的技术的方面一起使用的示例性操作环境。

具体实施方式

在此所描述的技术可以通过提供相关结果为用户提供更高效的搜索会话，而不需要多个搜索。时常地，当通过图像搜索查看网络上的内容时，用户打算完成与图像作为整体有关或与图像内的一个或多个对象有关的任务。例如，用户可能想要买图像内所描绘的特定物品、找到图像内所描绘的食品的食谱、基于图像查找旅行目的地，等等。

对于呈现给用户的图像而言，包括用于任务完成的全部所要求的信息的图像是期望的。然而，情况不总是这样，这是因为可能不存在可用于当前查看的图像内容的足够的内容，或者所呈现的信息可能不满足用户的期望的意图(例如，图像中的商品的价格可能太高、图像中的商品的食谱可能太复杂等)。在这样的情况中，如果基于图像内的内容(和/或附加信息)呈现有聚焦在任务完成周围的视觉相似图像，则用户将极大地受益，因此，用户可以浏览视觉类似内容的结果集以便完成用户的预期的任务。附加信息可以包括来自托管图像的网页的数据或者来自提供图像的移动设备的数据(诸如GPS数据、当日时间等)。附加信息还可以包括上下文位置数据。例如，如果用户当在商店处时调用搜索，则可以确定用户往往进行比较购物。作为另一示例，如果用户在餐馆中时调用针对食品的搜索，则可以确定用户想要计算卡路里而不是搜索食谱，然而如果用户提交杂志封面上描写的食品的图像，则可以确定用户正在搜索食谱。