[发明专利]一种文本改写的方法以及相关设备有效
申请号: | 201810709347.1 | 申请日: | 2018-07-02 |
公开(公告)号: | CN109117475B | 公开(公告)日: | 2022-08-16 |
发明(设计)人: | 王璐;张文明;陈少杰 | 申请(专利权)人: | 武汉斗鱼网络科技有限公司 |
主分类号: | G06F40/30 | 分类号: | G06F40/30;G06F40/216;G06F40/289 |
代理公司: | 北京众达德权知识产权代理有限公司 11570 | 代理人: | 刘杰 |
地址: | 430000 湖北省武汉市东湖开*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 文本 改写 方法 以及 相关 设备 | ||
1.一种文本改写的方法,其特征在于,包括:
将用户输入的目标文本进行分词,以得到第一分词集合,所述第一分词集合中至少包括一个分词;
对所述第一分词集合中的每个分词分别进行改写,以得到第二分词集合,所述第二分词集合中的各个分词与所述第一分词集合中的各个分词具有关联关系,且所述第一分词集合中的每个分词至少对应所述第二分词集合中的一个分词;
计算所述第二分词集合中的每个分词的语义损失,所述语义损失为所述第一分词集合中的分词与所述第二分词集合中对应的分词的差异度;
确定将所述第二分词集合中语义损失小于预设值的分词作为所述目标文本的改写候选词;
所述计算所述第二分词集合中的每个分词的语义损失包括:
通过如下公式计算所述第二分词集合中的每个分词的语义损失:
其中,所述α和所述β是权重因子,且α+β=1,所述ε是平滑因子,所述q是所述第一分词集合中的各个分词,所述q0是所述第二分词集合中的各个分词,所述S(q)是所述q的历史行为得分,所述S(q0)是改写搜索文本q0的历史行为得分,所述t是所述q中的任一分词,所述t0是所述q0中的任一分词,所述wt是所述t对应的权重,所述f(t|t0)为将所述t替换为所述t0的收益。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
通过如下公式计算所述S(q):
其中,norm_pv(q)是标准化后的所述q在预设时长被搜索的总次数,norm_click(q)是标准化后的所述q在所述预设时长内搜索点击的次数,norm_clickratio(q)是标准化后的所述q在所述预设时长内的点击率。
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
通过如下公式计算所述q在所述预设时长内的点击率:
其中,x′ir是标准化前的第i个评价指标,min(x′i)为所述预设时长内的所有搜索文本中第i个评价指标的最小值,max(x′i)是所述预设时长内的所有搜索文本中第i个评价指标的最大值。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
通过如下公式计算所述wt:
wt=idft*tft*it;
其中,tft为预设时长内所述t在所述q中出现的频率,N(q,t)为所述预设时长内所述q中所述t出现的次数,N(q)是所述预设时长内所述q出现的总次数,idft为所述预设时长内所述t的倒排文档频率,其中:N是所述预设时长内所有查询的个数,N(t)为所述预设时长内包含所述t的查询个数,it是分词t的重要性系数。
5.根据权利要求1所述的方法,其特征在于,所述将用户输入的目标文本进行分词,以得到第一分词集合包括:
获取所述用户输入的目标文本;
通过目标分词工具对所述目标文本进行分词,以得到所述第一分词集合。
6.根据权利要求1所述的方法,其特征在于,所述确定将所述第二分词集合中语义损失小于预设值的分词作为所述目标文本的改写候选词之后,所述方法包括:
按照预设规则对所述目标文本的改写候选词进行展示。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于武汉斗鱼网络科技有限公司,未经武汉斗鱼网络科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810709347.1/1.html,转载请声明来源钻瓜专利网。