[发明专利]一种文本分类方法及装置在审
申请号: | 202111580707.0 | 申请日: | 2021-12-22 |
公开(公告)号: | CN114239746A | 公开(公告)日: | 2022-03-25 |
发明(设计)人: | 张岩 | 申请(专利权)人: | 中国建设银行股份有限公司 |
主分类号: | G06K9/62 | 分类号: | G06K9/62;G06F40/44;G06F40/295;G06F40/284;G06N3/04;G06N3/08 |
代理公司: | 北京同达信恒知识产权代理有限公司 11291 | 代理人: | 万晓君 |
地址: | 100033 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 文本 分类 方法 装置 | ||
1.一种文本分类方法,其特征在于,包括:
拆分待分类文本,得到至少两个子文本;
针对任意一个子文本,根据预先配置的格式与解析方式的对应关系,确定所述任意一个子文本的格式对应的解析方式,并基于确定的所述解析方式对所述任意一个子文本进行解析,确定所述任意一个子文本的类别;
基于所述至少两个子文本的类别,确定所述待分类文本的类别。
2.如权利要求1所述的方法,其特征在于,在根据预先配置的格式与解析方式的对应关系,确定所述任意一个子文本的格式对应的解析方式之前,所述方法还包括:
将所述任意一个子文本转化为子文本向量;
将所述子文本向量输入到预先训练好的循环神经网络中,获取所述子文本向量对应的每种格式的概率;
根据所述子文本向量对应的每种格式的概率确定所述任意一个子文本的格式。
3.如权利要求2所述的方法,其特征在于,根据所述子文本向量对应的每种格式的概率确定所述任意一个子文本的格式,包括:
将所述子文本向量对应的每种格式的概率中概率最大的格式作为所述任意一个子文本的格式;或者,
通过维特比算法,根据所述至少一个子文本中除所述任意一个子文本外其他子文本的格式和所述子文本向量对应的每种格式的概率,确定所述任意一个子文本的格式。
4.如权利要求2或3所述的方法,其特征在于,在将所述任意一个子文本转化为子文本向量之前,所述方法还包括:
根据预先存储的修正词汇集合,确定所述任意一个子文本中存在所述修正词汇集合中包括的待修正的词汇;所述修正词汇集合中包括所述待修正词汇和与所述待修正词汇对应的修正后词汇;
根据所述修正词汇集合将所述任意一个子文本中存在的待修正词汇进行修正。
5.如权利要求1-3任一项所述的方法,其特征在于,所述拆分待分类文本,包括:
将所述待分类文本逐行进行拆分。
6.一种文本分类装置,其特征在于,包括:
拆分单元,用于拆分待分类文本,得到至少两个子文本;
解析单元,用于针对任意一个子文本,根据预先配置的格式与解析方式的对应关系,确定所述任意一个子文本的格式对应的解析方式,并基于确定的所述解析方式对所述任意一个子文本进行解析,确定所述任意一个子文本的类别;
所述解析单元,还用于基于所述至少两个子文本的类别,确定所述待分类文本的类别。
7.如权利要求6所述的装置,其特征在于,所述解析单元,还用于:
将所述任意一个子文本转化为子文本向量;
将所述子文本向量输入到预先训练好的循环神经网络中,获取所述子文本向量对应的每种格式的概率;
根据所述子文本向量对应的每种格式的概率确定所述任意一个子文本的格式。
8.如权利要求7所述的装置,其特征在于,所述解析单元,具体用于:
将所述子文本向量对应的每种格式的概率中概率最大的格式作为所述任意一个子文本的格式;或者,
通过维特比算法,根据所述至少一个子文本中除所述任意一个子文本外其他子文本的格式和所述子文本向量对应的每种格式的概率,确定所述任意一个子文本的格式。
9.如权利要求7或8所述的装置,其特征在于,所述解析单元,在将所述任意一个子文本转化为子文本向量之前,还用于:
根据预先存储的修正词汇集合,确定所述任意一个子文本中存在所述修正词汇集合中包括的待修正的词汇;所述修正词汇集合中包括所述待修正词汇和与所述待修正词汇对应的修正后词汇;
根据所述修正词汇集合将所述任意一个子文本中存在的待修正词汇进行修正。
10.如权利要求6-8任一项所述的装置,其特征在于,所述拆分单元,具体用于:
将所述待分类文本逐行进行拆分。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国建设银行股份有限公司,未经中国建设银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111580707.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:漏洞检测方法、装置、电子设备及计算机可读介质
- 下一篇:双头扣箱机构