[发明专利]一种文本关键词处理方法、装置及设备在审
| 申请号: | 202010412802.9 | 申请日: | 2020-05-15 |
| 公开(公告)号: | CN111339751A | 公开(公告)日: | 2020-06-26 |
| 发明(设计)人: | 刘凡 | 申请(专利权)人: | 支付宝(杭州)信息技术有限公司 |
| 主分类号: | G06F40/211 | 分类号: | G06F40/211;G06F40/289;G06F40/253;G06F16/35 |
| 代理公司: | 北京国昊天诚知识产权代理有限公司 11315 | 代理人: | 许振新 |
| 地址: | 310000 浙江省杭州市*** | 国省代码: | 浙江;33 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 文本 关键词 处理 方法 装置 设备 | ||
1.一种文本关键词处理方法,包括:
基于分词及词性标注后的语句文本进行依存句法分析,得到所述语句文本内各分词的句法依存关系;
基于所述语句文本中各分词的句法依存关系和词性,生成所述语句文本中各分词对应的分词样本;
分别将所述各分词对应的分词样本作为关键词识别模型的输入,以得到各分词对应的关键词标签,所述关键词识别模型基于批量的语句文本对应的训练分词样本及训练分词样本对应的关键词标签训练得到,所述训练分词样本具有与所述分词样本相同维度的特征;
基于各分词及对应的关键词标签,得到所述语句文本的关键词信息。
2.根据权利要求1所述的方法,所述关键词标签包括关键标签和非关键标签,所述关键标签和非关键标签分别用于表征标签对应的分词为关键词和非关键词;
其中,所述基于各分词及对应的关键词标签,得到所述语句文本的关键词信息,包括:
确定各分词中关键标签对应的关键分词;
基于各关键分词,得到所述语句文本的关键词信息。
3.根据权利要求2所述的方法,所述关键标签包括多个关键级别标签,所述多个关键级别标签用于表征分词的多个关键级别;
其中,所述基于各关键分词,得到所述语句文本的关键词信息,包括:
基于各关键分词对应的关键级别标签,确定各关键分词的关键级别;
基于所述各关键分词及对应的关键级别,得到所述语句文本的关键词信息。
4.根据权利要求3所述的方法,所述训练分词样本对应的关键级别标签包括:
第一类分词或否定助词的第二类分词对应的第一关键级别标签,所述第一类分词用于表达语句文本的语义,所述第二类分词用于修饰所述第一类分词;
非否定助词的所述第二类分词对应的第二关键级别标签;
第三类分词对应的第三关键级别标签,所述第三类分词用于修饰所述第二分词;
其中,所述第一关键级别标签、所述第二关键级别标签、第三关键级别标签表征的分词的关键级别依次降低。
5.根据权利要求4所述的方法,所述训练分词样本对应的关键级别标签还包括:
属于同一复句的主句中的第一目标分词对应的第n关键级别标签,以及从句中的第二目标分词对应的第n+1关键级别标签;
其中,所述第一目标分词和所述第二目标分词属于同一类分词,n大于或等于1,所述第n关键级别标签表征的分词的关键级别大于第n+1关键级别标签表征的分词的关键级别。
6.根据权利要求1所述的方法,所述训练分词样本还包括:分词在语句文本中的位置。
7.根据权利要求6所述的方法,所述训练分词样本还包括:分词的词距特征,所述词距特征用于表征同一语句文本中各分词的位置与核心词的位置之间的距离,所述核心词为各分词的句法依存关系中处于支配地位的分词。
8.一种文本关键词处理方法,包括:
对批量的语句文本进行分词及词性标注处理;
基于分词及词性标注处理后的语句文本进行依存句法分析,得到每个语句文本内各分词的句法依存关系;
基于每个语句文本中各分词的句法依存关系和词性,生成每个语句文本中各分词对应的训练分词样本;
将每个语句文本中各分词对应的训练分词样本作为关键词识别模型的输入,将分词的关键词标签作为所述关键词识别模型的输出,对所述关键词识别模型进行训练。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于支付宝(杭州)信息技术有限公司,未经支付宝(杭州)信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010412802.9/1.html,转载请声明来源钻瓜专利网。





