[发明专利]文本分类方法、系统、计算机设备和存储介质有效
申请号: | 201810290044.0 | 申请日: | 2018-04-03 |
公开(公告)号: | CN108536800B | 公开(公告)日: | 2022-04-19 |
发明(设计)人: | 翁永金;李百川;冯珏曦;李锦胜;陈第;蔡锐涛 | 申请(专利权)人: | 有米科技股份有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06K9/62 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 肖宇扬;付静 |
地址: | 511400 广东省广州市番*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文本 分类 方法 系统 计算机 设备 存储 介质 | ||
本申请涉及一种文本分类方法、系统、计算机设备和存储介质。所述方法包括:获取待分类文本信息的特征词,根据特征词和预先建立的行业特征词库,得到待分类文本信息对应的初始行业标签,根据初始行业标签和预设的分类模型,得到待分类文本信息对应初始行业标签中各行业标签的第一行业概率,根据已知行业分类的已知文本信息、待分类文本信息及其对应的初始行业标签,建立迭代模型,根据迭代模型,得到待分类文本信息对应初始行业标签中各行业标签的第二行业概率,根据第一行业概率和第二行业概率,从初始行业标签中确定出待分类文本信息对应的行业分类。采用本方法能够使行业分类的结果更加准确。
技术领域
本申请涉及文本挖掘技术领域,特别是涉及一种文本分类方法、系统、计算机设备和存储介质。
背景技术
随着互联网的发展,传统的营销行业也愈发焕发生机,营销渠道逐渐从线下转到线上,广告文案也随之呈现爆炸性的增长。广告文案实质上是属于短文本范畴的文本信息,其文本内容较少,具有特征稀疏、缺少上下文信息、信息量少等缺点,同时广告文案为了吸引用户一般呈现的内容含义均是比较表面的。若能利用文本信息对广告文案进行行业分类,不同行业企业便可有的放矢地参考同行文案创意来提升自身广告效果。
针对短文本分类,目前常见的文本分类方法有以下方法:
(1)人工经验标注方法:人工依靠经验对广告文案进行分类;
(2)基于模型的自动分类方法,一般是先对文本进行特征处理再通过相应的算法,如基于朴素贝叶斯(Bayes)、支持向量机(SVM,Support Vector Machine)、人工神经网络(ANN,artificial neural network)、k最邻近(kNN,k-Nearest Neighbor)等进行判别。
对于人工分类,虽能保证准确率但拓展性差,很难达到实用的标准。对于模型虽能自动化实现分类,但如SVM、ANN等算法一般均为黑箱,人为没办法从特征角度理解其机理,同时对于不同模型在不同业务背景下效果区别较大。从而导致文本信息进行行业分类时准确性较低和效率均较低。
发明内容
基于此,有必要针对上述技术问题,提供一种能够解决文本信息进行行业分类时准确性较低和效率均较低的文本分类方法、系统、计算机设备和存储介质。
一种文本分类方法,所述方法包括:
获取待分类文本信息的特征词,根据所述特征词以及预先建立的行业特征词库,得到所述待分类文本信息对应的初始行业标签;
根据预设的分类模型以及所述初始行业标签,得到所述待分类文本信息对应所述初始行业标签中各所述行业标签的第一行业概率;
根据已知行业分类的已知文本信息、所述待分类文本信息及其对应的初始行业标签,建立迭代模型,根据所述迭代模型,得到所述待分类文本信息对应所述初始行业标签中各所述行业标签的第二行业概率;
根据所述第一行业概率以及所述第二行业概率,从初始行业标签中确定出所述待分类文本信息对应的行业分类。
上述文本分类方法,包括三层分类结构框架,即通过行业特征词库的匹配,实现分类的第一层结构框架,得到初始行业标签,对于未能实现分类的文本信息,将初始行业标签,通过预先训练的分类模型,得到初始行业标签中每个行业标签的第一行业概率,根据第一行业概率进行分类,实现分类的第二层结构框架,在第二层框架未能满足准确性要求时,通过已知行业分类的已知文本信息,建立迭代模型,得到初始行业标签中每个行业标签的第二行业概率,然后根据所述第一行业概率以及所述第二行业概率进行分类,实现分类的第三层结构框架。本发明实施例,通过上述分类的三层结构框架,使行业分类的结果更加准确,分类更加快速。
一种文本分类系统,所述系统包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于有米科技股份有限公司,未经有米科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810290044.0/2.html,转载请声明来源钻瓜专利网。