[发明专利]联想词去重方法及装置、计算机可读存储介质和电子设备

说明书

本公开提供了一种联想词去重方法及装置、计算机可读存储介质和电子设备。该方法包括：获得不同候选联想词之间的语义关联特征表示向量；利用第一分类模型对不同候选联想词之间的语义关联特征表示向量进行处理，获得不同候选联想词之间的第一语义重复指标；获得不同候选联想词之间的历史搜索行为重叠特征表示向量，历史搜索行为重叠特征表示向量表示不同候选联想词之间的搜索行为重叠程度；利用第二分类模型对不同候选联想词之间的历史搜索行为重叠特征表示向量进行处理，获得不同候选联想词之间的第二语义重复指标；根据不同候选联想词之间的第一语义重复指标和第二语义重复指标，去重过滤候选联想词中存在语义重复的候选联想词，确定目标联想词。

技术领域

本公开涉及自然语言处理技术领域，具体而言，涉及一种联想词去重方法及装置、计算机可读存储介质和电子设备。

背景技术

随着互联网应用的发展，越来越多的用户通过在搜索页面输入关键词来触发搜索操作以实现搜索，或者在输入法的输入栏中输入关键词，在这些类似的应用场景中，为了提高用户体验，相关技术会通过各种技术手段感知用户的意图，根据用户输入的关键词罗列出相应的联想词，但相关技术无法有效地过滤这些联想词中存在语义重复的联想词，导致最终展示给用户的联想词不够丰富。

需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解。

发明内容

本公开实施例提供一种联想词去重方法及装置、计算机可读存储介质、电子设备，能够根据不同候选联想词之间的语义重复程度和搜索行为重叠程度，去除候选联想词中存在语义重复的候选联想词，从而可以展示更丰富的目标联想词。

本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开的实践而习得。

本公开实施例提供一种联想词去重方法，所述方法包括：对查询关键词进行语义召回，获得所述查询关键词的候选联想词；获得不同候选联想词之间的语义关联特征表示向量，所述语义关联特征表示向量表示不同候选联想词之间的语义重复程度；利用第一分类模型对不同候选联想词之间的语义关联特征表示向量进行处理，获得不同候选联想词之间的第一语义重复指标；获得不同候选联想词之间的历史搜索行为重叠特征表示向量，所述历史搜索行为重叠特征表示向量表示不同候选联想词之间的搜索行为重叠程度；利用第二分类模型对不同候选联想词之间的历史搜索行为重叠特征表示向量进行处理，获得不同候选联想词之间的第二语义重复指标；根据不同候选联想词之间的第一语义重复指标和第二语义重复指标，去重过滤所述候选联想词中存在语义重复的候选联想词，确定目标联想词，以同时展示所述查询关键词和所述目标联想词。

本公开实施例提供一种联想词去重装置，所述装置包括：候选联想词获得单元，用于对查询关键词进行语义召回，获得所述查询关键词的候选联想词；语义关联特征向量获得单元，用于获得不同候选联想词之间的语义关联特征表示向量，所述语义关联特征表示向量表示不同候选联想词之间的语义重复程度；第一语义重复指标获得单元，用于利用第一分类模型对不同候选联想词之间的语义关联特征表示向量进行处理，获得不同候选联想词之间的第一语义重复指标；搜索行为重叠特征获得单元，用于获得不同候选联想词之间的历史搜索行为重叠特征表示向量，所述历史搜索行为重叠特征表示向量表示不同候选联想词之间的搜索行为重叠程度；第二语义重复指标获得单元，用于利用第二分类模型对不同候选联想词之间的历史搜索行为重叠特征表示向量进行处理，获得不同候选联想词之间的第二语义重复指标；候选联想词去重过滤单元，用于根据不同候选联想词之间的第一语义重复指标和第二语义重复指标，去重过滤所述候选联想词中存在语义重复的候选联想词，确定目标联想词，以同时展示所述查询关键词和所述目标联想词。