[发明专利]一种文本打分方法及装置有效
申请号: | 201910517312.2 | 申请日: | 2019-06-14 |
公开(公告)号: | CN110298038B | 公开(公告)日: | 2022-12-06 |
发明(设计)人: | 刘思阳 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
主分类号: | G06F40/289 | 分类号: | G06F40/289;G06F40/253;G06N3/04 |
代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 李欣;丁芸 |
地址: | 100080 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 文本 打分 方法 装置 | ||
1.一种文本打分方法,其特征在于,所述方法包括:
对待打分文本进行分词处理,得到待打分文本的分词;
确定所述分词的词义向量和词性向量,得到由所述词义向量和所述词性向量组成的词向量,所述词义向量用于表示所述分词的词义,所述词性向量用于表示所述分词的词性;
将所述词向量输入至于预先经过训练的序列编码器,得到所述序列编码器的输出,作为所述待打分文本的序列编码向量,所述序列编码向量用于表示文本中分词之间的上下文关系;
将所述词向量输入至预先经过训练的树型编码器,得到所述树型编码器的输出,作为所述待打分文本的树型编码向量,所述树型编码向量用于表示文本的语法结构;
融合所述待打分文本的所述序列编码向量和所述树型编码向量,得到所述待打分文本的融合编码向量;
基于所述融合编码向量,确定所述待打分文本为指定类型的文本的可信程度,作为所述待打分文本的得分。
2.根据权利要求1所述的方法,其特征在于,所述融合所述待打分文本的所述序列编码向量和所述树型编码向量,得到所述待打分文本的融合编码向量,包括:
融合所述待打分文本的所述序列编码向量和所述树型编码向量以及预设任务向量,得到所述待打分文本的融合编码向量,所述任务向量为用于表示多种预设文本类型中的一种文本类型的独热(one-hot)编码;
所述基于所述融合编码向量,确定所述待打分文本为指定类型的文本的可信程度,作为所述待打分文本的得分,包括:
基于所述融合编码向量,确定所述待打分文本为所述任务向量所表示的文本类型的文本的可信程度,作为所述待打分文本的得分。
3.根据权利要求2所述的方法,其特征在于,所述融合所述待打分文本的所述序列编码向量和所述树型编码向量以及预设任务向量,得到所述待打分文本的融合编码向量,包括:
按照下式融合所述序列编码向量和所述树型编码向量以及预设任务向量:
ssub=stree-sseq
smul=stree⊙sseq
s′sub=stree-s′s′eq
s′mul=stree⊙ss′eq
sfinal=ssub∶smul∶s′sub∶s′mul∶stree∶sseq∶stype
其中,sfinal为融合编码向量,stree为所述树型编码向量,sseq为所述序列编码向量,stype为预设任务向量,⊙表示元素级乘法,:表示向量之间的首位拼接,′表示经过翻转的向量。
4.根据权利要求3所述的方法,其特征在于,所述基于所述融合编码向量,确定所述待打分文本为指定类型的文本的可信程度,作为所述待打分文本的得分,包括:
将所述融合编码向量,输入至预先经过训练的分类器,得到所述待打分文本为指定类型的文本的可信程度,作为所述待打分文本的得分。
5.根据权利要求1所述的方法,其特征在于,所述确定所述分词的词义向量和词性向量,得到由所述词义向量和所述词性向量组成的词向量,包括:
确定所述分词的词义向量和词性向量;
将所述分词的词义向量和词性向量首尾拼接,得到拼接结果,作为词向量。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910517312.2/1.html,转载请声明来源钻瓜专利网。