[发明专利]文本分类方法、装置、计算机设备及存储介质在审
申请号: | 201910963674.4 | 申请日: | 2019-10-11 |
公开(公告)号: | CN111090719A | 公开(公告)日: | 2020-05-01 |
发明(设计)人: | 李钢 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06F16/31 | 分类号: | G06F16/31;G06F16/33;G06F16/35;G06N3/02 |
代理公司: | 深圳市明日今典知识产权代理事务所(普通合伙) 44343 | 代理人: | 王杰辉 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文本 分类 方法 装置 计算机 设备 存储 介质 | ||
本申请揭示了文本分类方法、装置、计算机设备及存储介质,文本分类方法包括:获取Bayes分类模型根据第一文本输出的第一分类信息,获取神经网络分类模型根据第一文本输出的第二分类信息;若第一分类信息与第二分类信息不相同,则根据第一文本的数据量,确定Bayes分类模型对应的第一权重,以及神经网络分类模型对应的第二权重;计算Bayes分类模型对第一文本的第一分类评价值,以及神经网络分类模型对第一文本的第二分类评价值;判断第一分类评价值是否大于第二分类评价值;若是,则将第一分类评价值对应的第一类目,作为第一文本对应的分类类目。通过将Bayes分类模型与神经网络分类模型匹配使用,提高对文本分类的精准度,且能够快速调节对新样本的学习能力。
技术领域
本申请涉及到计算机领域,特别是涉及到文本分类方法、装置、计算机设备及存储介质。
背景技术
文本分类是对大量杂乱文档进行类别划分,在文本检索领域具有重要作用。因此,对文本进行分类划分,有助于用户快速选择自己需要的领域内的信息文档。目前,对于样本不均衡的中文多分类任务,如财政领域的政策分类,使用单一分类标准的机器学习方法进行文本分类,无法避免单个分类算法本身的缺陷,难以达到理想的准确分类效果,且数据在不断增长的过程中分类精准度更差,不能满足用户的使用需求。
发明内容
本申请的主要目的为提供文本分类方法,旨在解决现有文本分类基于一种分类方法分类不准确的技术问题。
本申请提出一种文本分类方法,方法包括:
获取Bayes分类模型根据第一文本输出的第一分类信息,获取神经网络分类模型根据所述第一文本输出的第二分类信息;
若所述第一分类信息与所述第二分类信息不相同,则根据所述第一文本的数据量,确定所述Bayes分类模型对应的第一权重,以及所述神经网络分类模型对应的第二权重;
计算所述Bayes分类模型对所述第一文本的第一分类评价值,以及所述神经网络分类模型对所述第一文本的第二分类评价值;
判断所述第一分类评价值是否大于所述第二分类评价值;
若是,则将所述第一分类评价值对应的所述第一类目,作为所述第一文本对应的分类类目。
优选地,所述获取Bayes分类模型根据第一文本输出的第一分类信息的步骤,包括:
根据公式:获得所述第一文本对应的第一分类信息,其中,P(doc|ci)=x1P(word1|ci)x2P(word2|ci)...xmP(wordm|ci),xi=len(wordi)sim(wordi,wordaj),len(wordi)表示wordi的字符长度,sim(wordi,wordaj)表示wordi,wordaj之间的向量相似度,wordaj表示第a类目下的第j个词。
优选地,所述根据公式:获得所述第一文本对应的第一分类信息的步骤,包括:
根据预构建的短语字典树以及预设分词器,对所述第一文本进行分词处理;
根据第一分词对应的第一字符长度值以及第一词向量,得到所述第一分词相对于指定类目的归类概率,其中,所述指定类目包含于所有的预设类目中;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910963674.4/2.html,转载请声明来源钻瓜专利网。
- 上一篇:基于数据仓库的用户特征产出方法和系统
- 下一篇:显示装置