[发明专利]基于BM25的搜索相关性度量方法、存储介质、设备及系统在审
申请号: | 201810311995.1 | 申请日: | 2018-04-09 |
公开(公告)号: | CN110362813A | 公开(公告)日: | 2019-10-22 |
发明(设计)人: | 王璐;陈少杰;张文明 | 申请(专利权)人: | 武汉斗鱼网络科技有限公司 |
主分类号: | G06F17/27 | 分类号: | G06F17/27 |
代理公司: | 武汉智权专利代理事务所(特殊普通合伙) 42225 | 代理人: | 张凯 |
地址: | 430000 湖北省武汉市东湖开*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 搜索 匹配 搜索查询 意图识别 设备及系统 存储介质 度量 分词 度量计算 分词处理 大数据 算法 文本 衡量 | ||
1.一种基于BM25的搜索相关性度量方法,用于对搜索意图匹配的相关性进行度量,其特征在于,包括以下步骤:
对用户的搜索查询文本进行分词处理,得到多个分词;
基于得到的分词,对用户的搜索意图匹配的相关性进行计算:
其中,RQ为搜索意图匹配相关性得分,ti表示得到的分词中的第i个分词,H为意图域集合,由多个不同的意图域f组成,表示分词ti在意图域f中可以匹配到的次数,wf为意图域f在意图域集合H中的权重,是分词ti的倒排文档频率,Kf=k1*(1-b+b*nf/avg(nf)),其中,nf是意图域f中词的个数,k1和b是调节因子,avg(nf)是意图域集合中所有意图域的平均含有词个数;
对计算得到的搜索意图匹配相关性得分进行判断,若搜索意图匹配相关性得分大于设定阈值,则用户此次搜索查询的意图识别有效,否则用户此次搜索查询的意图识别无效。
2.如权利要求1所述的一种基于BM25的搜索相关性度量方法,其特征在于:对于其计算公式为:
其中,N是在设定时间段内所有分词查询的次数,N(ti)为在设定时间段内分词ti的查询次数。
3.如权利要求1所述的一种基于BM25的搜索相关性度量方法,其特征在于:所述搜索意图为基于用户的搜索文本判断得到的用户实际要搜索的意图内容。
4.如权利要求3所述的一种基于BM25的搜索相关性度量方法,其特征在于:所述意图域为根据业务经验对用户的搜索意图进行划分的意图集合,且每个意图域由多个索引词组成。
5.如权利要求4所述的一种基于BM25的搜索相关性度量方法,其特征在于:在直播领域的搜索中,意图域集合包括主播意图域和分区意图域。
6.一种存储介质,该存储介质上存储有计算机程序,其特征在于:所述计算机程序被处理器执行时实现权利要求1至5任一项所述的方法。
7.一种基于BM25的搜索相关性度量设备,包括存储器和处理器,存储器上储存有在处理器上运行的计算机程序,其特征在于:所述处理器执行所述计算机程序时实现权利要求1至5任一项所述的方法。
8.一种基于BM25的搜索相关性度量系统,其特征在于,包括:
分词处理模块,其用于对用户的搜索查询文本进行分词处理,得到多个分词;
计算模块,其用于基于得到的分词,对用户的搜索意图匹配的相关性进行计算:
其中,RQ为搜索意图匹配相关性得分,ti表示得到的分词中的第i个分词,H为意图域集合,由多个不同的意图域f组成,表示分词ti在意图域f中可以匹配到的次数,wf为意图域f在意图域集合H中的权重,是分词ti的倒排文档频率,Kf=k1*(1-b+b*nf/avg(nf)),其中,nf是意图域f中词的个数,k1和b是调节因子,avg(nf)是意图域集合中所有意图域的平均含有词个数;
判断模块,其用于对计算得到的搜索意图匹配相关性得分进行判断,若搜索意图匹配相关性得分大于设定阈值,则用户此次搜索查询的意图识别有效,否则用户此次搜索查询的意图识别无效。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于武汉斗鱼网络科技有限公司,未经武汉斗鱼网络科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810311995.1/1.html,转载请声明来源钻瓜专利网。