[发明专利]文本分类的方法和装置在审
申请号: | 202110956610.9 | 申请日: | 2021-08-19 |
公开(公告)号: | CN113626603A | 公开(公告)日: | 2021-11-09 |
发明(设计)人: | 唐锦阳;都金涛;祝慧佳 | 申请(专利权)人: | 支付宝(杭州)信息技术有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F40/30;G06F40/289;G06F40/253;G06F40/232;G06N3/04;G06N3/08 |
代理公司: | 北京博思佳知识产权代理有限公司 11415 | 代理人: | 王剑 |
地址: | 310000 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文本 分类 方法 装置 | ||
说明书披露一种文本分类的方法和装置。所述方法包括:对待分类文本进行切分,得到若干文本片段;针对每个文本片段,将所述文本片段作为入参输入已训练的片段语义提取模型以对所述文本片段进行语义提取,得到所述文本片段对应的片段语义向量;将所述若干文本片段对应的若干片段语义向量作为入参输入已训练的文本语义提取模型以对所述待分类文本进行语义提取,得到所述待分类文本对应的文本语义向量;将所述文本语义向量作为入参输入已训练的分类模型,根据所述分类模型的输出结果,确定所述待分类文本所属的文本分类。
技术领域
本说明书涉及人工智能技术领域,尤其涉及一种文本分类的方法和装置。
背景技术
互联网技术已渗入社会生活的方方面面,为了更好地掌握用户对于各类商品、服务的评价以及及时管控网络中的不当言论,基于自然语言处理技术实现网络文本的情感分析、舆情分析等成为大势所趋。而诸如新闻、长评等文本中包涵着大量的有效信息,如何对其进行分类成为亟待解决的问题。
发明内容
有鉴于此,本说明书一个或多个实施例提供一种文本分类的方法和装置。
为实现上述目的,本说明书一个或多个实施例提供的技术方案如下:
根据本说明书一个或多个实施例的第一方面,提出了一种文本分类的方法,所述方法包括:
对待分类文本进行切分,得到若干文本片段;
针对每个文本片段,将所述文本片段作为入参输入已训练的片段语义提取模型以对所述文本片段进行语义提取,得到所述文本片段对应的片段语义向量;
将所述若干文本片段对应的若干片段语义向量作为入参输入已训练的文本语义提取模型以对所述待分类文本进行语义提取,得到所述待分类文本对应的文本语义向量;
将所述文本语义向量作为入参输入已训练的分类模型,根据所述分类模型的输出结果,确定所述待分类文本所属的文本分类。
根据本说明书一个或多个实施例的第二方面,提出了一种文本分类的装置,所述装置包括:
文本切分单元,对待分类文本进行切分,得到若干文本片段;
片段语义提取单元,针对每个文本片段,将所述文本片段作为入参输入已训练的片段语义提取模型以对所述文本片段进行语义提取,得到所述文本片段对应的片段语义向量;
文本语义提取单元,将所述若干文本片段对应的若干片段语义向量作为入参输入已训练的文本语义提取模型以对所述待分类文本进行语义提取,得到所述待分类文本对应的文本语义向量;
文本分类单元,将所述文本语义向量作为入参输入已训练的分类模型,根据所述分类模型的输出结果,确定所述待分类文本所属的文本分类。
根据本说明书一个或多个实施例的第三方面,提出了一种电子设备,包括处理器和用于存储机器可执行指令的存储器;
其中,通过读取并执行所述存储器存储的与文本分类的逻辑对应的机器可执行指令,所述处理器实现上述第一方面所述方法的步骤。
根据本说明书一个或多个实施例的第四方面,提出了一种计算机可读存储介质,其上存储有计算机程序,所述程序被处理器执行时实现上述第一方面所述方法的步骤。
由以上描述可以看出,本说明书中,先对待分类文本进行切分,得到若干文本片段并对这些文本片段分别提取语义,得到若干片段语义向量,然后基于各文本片段的片段语义向量再次提取语义,进而得到待分类文本的文本语义向量,最后基于所述文本语义向量进行文本分类。本说明书通过两次语义提取,得到了更加全面的语义特征,提高了文本分类的准确性;此外,针对语义复杂的长文本,本说明书所采用的层次结构具有更好的分类效果。
附图说明
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于支付宝(杭州)信息技术有限公司,未经支付宝(杭州)信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110956610.9/2.html,转载请声明来源钻瓜专利网。