[发明专利]文本数据分类方法、装置、设备及存储介质有效
| 申请号: | 201810719339.5 | 申请日: | 2018-06-29 |
| 公开(公告)号: | CN108875067B | 公开(公告)日: | 2022-02-01 |
| 发明(设计)人: | 连荣忠;马宗阳;彭金华;姜迪;何径舟 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
| 主分类号: | G06F16/35 | 分类号: | G06F16/35 |
| 代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 宋合成 |
| 地址: | 100085 北京市*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 文本 数据 分类 方法 装置 设备 存储 介质 | ||
本申请提出一种文本数据分类方法、装置、设备及存储介质,其中方法包括:利用预设的主题模型,对待处理的文本数据进行主题识别,确定所述待处理的文本数据对应的目标主题标识及所述目标主题标识对应的第一关键词集;获取多个预设的可能目标类别对应的多个第二关键词集;根据所述第一关键词集中的多个第一关键词,分别与所述多个第二关键词集中的多个第二关键词间的各匹配度,确定所述待处理的文本数据所属的目标类别。由此,提高了对文本数据分类时,分类结果的准确率及可靠性,且由于根据关键词间的匹配,确定待处理的文本数据所属的目标类别,无需大量的人工标注数据,减少了人力成本。
技术领域
本申请涉及文本分类技术领域,特别涉及一种文本数据分类方法、装置、设备及存储介质。
背景技术
随着互联网络上大量信息不断的涌现出来,给信息的查询以及检索带来了很大的不便,如何在海量信息中快速有效地找到用户所需要的信息,是当前信息科学和技术领域面临的一大挑战。文本分类技术能够对海量信息进行有序整理组织,从而方便用户准确地定位所需的信息。同时,文本分类方法涉及到模式识别中的很多基本问题,例如分类器设计问题,高维特征问题等等。因此,文本分类技术的研究具有重要的实用价值和理论意义。
目前,对文本数据进行分类时,多是利用预设的分类模型,对各文本数据的标题进行识别,以确定该文本数据所属的类型,但是由于文本数据的标题并无法完全准确的反映文本数据的内容,因此,采用这种方式对文本数据进行分类时,分类结果准确率较低,可靠性差。
发明内容
本申请实施例提出一种文本数据分类方法、装置、设备及终端,用于解决相关技术中,利用预设的分类模型,对各文本数据的标题进行识别,以确定该文本数据所属的类型时,由于文本数据的标题并无法完全准确的反映文本数据的内容,从而分类结果准确率较低、可靠性差的技术问题。
本申请一方面实施例提出了一种文本数据分类方法,该方法包括:利用预设的主题模型,对待处理的文本数据进行主题识别,确定所述待处理的文本数据对应的目标主题标识及所述目标主题标识对应的第一关键词集;获取多个预设的可能目标类别对应的多个第二关键词集;根据所述第一关键词集中的多个第一关键词,分别与所述多个第二关键词集中的多个第二关键词间的各匹配度,确定所述待处理的文本数据所属的目标类别。
本申请又一方面实施例提出了一种文本数据分类装置,该装置包括:识别模块,用于利用预设的主题模型,对待处理的文本数据进行主题识别,确定所述待处理的文本数据对应的目标主题标识及所述目标主题标识对应的第一关键词集;第一获取模块,用于获取多个预设的可能目标类别对应的多个第二关键词集;第一确定模块,用于根据所述第一关键词集中的多个第一关键词,分别与所述多个第二关键词集中的多个第二关键词间的各匹配度,确定所述待处理的文本数据所属的目标类别。
本申请又一方面实施例提出了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时,以实现前述实施例所述的文本数据分类方法。
本申请的又一方面实施例提出了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时,以实现前述实施例所述的文本数据分类方法。
本申请实施例提供的文本数据分类方法、装置、计算机设备及计算机可读存储介质,首先利用预设的主题模型,对待处理的文本数据进行主题识别,确定待处理的文本数据对应的目标主题标识及目标主题标识对应的第一关键词集,从而在获取多个预设的可能目标类别对应的多个第二关键词集后,可以根据第一关键词集中的多个第一关键词,分别与多个第二关键词集中的多个第二关键词间的各匹配度,确定待处理的文本数据所属的目标类别。由此,通过利用预设的主题模型,对待处理的文本数据进行识别,再根据关键词间的匹配,确定待处理的文本数据所属的目标类别,提高了对文本数据分类时,分类结果的准确率及可靠性,且由于根据关键词间的匹配,确定待处理的文本数据所属的目标类别,无需大量的人工标注数据,减少了人力成本。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810719339.5/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





