[发明专利]促进图像在搜索查询中的使用

权利要求书

1.一种计算机实施的方法，包括：

从用户设备接收查询图像；

对查询图像执行视觉识别处理，以识别查询图像中与图像中存在的对象相关的非文本图像特征，并获得描述与图像中存在的对象相关的非文本图像特征的文本图像标签；

访问将术语与已知实体的集合中的实体相关联的数据，以及将候选搜索查询与所述已知实体的集合中的实体相关联的数据；

使用为非文本图像特征获得的文本图像标签和将术语与已知实体的集合相关联的数据，识别与所获得的文本图像标签相关联的一个或多个实体，所述文本图像标签描述与查询图像中存在的对象相关的非文本图像特征，其中，识别一个或多个实体包括将文本图像标签和与已知实体的集合相关联的术语相比较，其中已知实体的集合中的每个已知实体与相应的术语集合相关联；

对于实体中的一个或多个，并从将候选搜索查询与已知实体的集合中的实体相关联的数据中，识别一个或多个候选搜索查询，其中，所述一个或多个候选搜索查询是文本搜索查询，并且其中所述一个或多个候选搜索查询不同于与一个或多个实体相关联的术语；

为候选搜索查询中的每一个生成各个相关性分数；

至少基于所生成的各个相关性分数选择具体候选搜索查询作为查询图像的代表性搜索查询；并且

响应于接收到查询图像而提供所述代表性搜索查询以用于输出。

2.根据权利要求1所述的方法，其中，为候选搜索查询中的每一个生成各个相关性分数包括，对于每个候选搜索查询：

确定查询图像的上下文是否匹配候选搜索查询；

基于所确定的匹配，为候选搜索查询生成各个相关性分数。

3.根据权利要求2所述的方法，其中，确定查询图像的上下文是否匹配候选搜索查询包括确定查询图像是否具有匹配候选搜索查询的关联定位。

4.根据权利要求1所述的方法，还包括：

接收自然语言查询；并且

至少基于接收到的自然语言查询，为候选搜索查询中的每一个生成各个相关性分数。

5.根据权利要求1所述的方法，其中，为候选搜索查询中的每一个生成各个相关性分数包括，对于每个候选搜索查询：

使用候选搜索查询生成搜索结果页面；

分析所生成的搜索结果页面以确定指示所述搜索结果页面有多感兴趣和多有用的度量；并且

基于所确定的度量，为候选搜索查询生成各个相关性分数。

6.根据权利要求1所述的方法，其中，为候选搜索查询中的每一个生成各个相关性分数包括，对于每个候选搜索查询：

确定候选搜索查询的流行度；并且

基于所确定的流行度，为候选搜索查询生成各个相关性分数。

7.根据权利要求1所述的方法，其中，接收与查询图像相关联的一个或多个实体包括：

获得一个或多个查询图像标签；并且

对于查询图像标签中的一个或多个，识别与所述一个或多个查询图像标签预先关联的一个或多个实体。

8.根据权利要求7所述的方法，其中，一个或多个查询图像标签包括细粒度图像标签。

9.根据权利要求7所述的方法，其中，一个或多个查询图像标签包括粗粒度图像标签。

10.根据权利要求7所述的方法，还包括为查询图像标签中的每一个生成各个标签分数。

11.根据权利要求10所述的方法，其中，查询图像标签的各个标签分数至少基于查询图像标签的时事性。

12.根据权利要求10所述的方法，其中，查询图像标签的各个标签分数至少基于标签有多特定。

13.根据权利要求10所述的方法，其中，查询图像标签的各个标签分数至少基于后端的可靠性和校准的后端置信度分数，其中通过所述后端获得查询图像标签。