[发明专利]实时流式文本分级监控方法和装置有效
| 申请号: | 201710058647.3 | 申请日: | 2017-01-23 |
| 公开(公告)号: | CN106886579B | 公开(公告)日: | 2020-01-14 |
| 发明(设计)人: | 张日崇;李晨;兰天;李建欣;彭浩 | 申请(专利权)人: | 北京航空航天大学 |
| 主分类号: | G06F16/9536 | 分类号: | G06F16/9536;G06Q50/00 |
| 代理公司: | 11205 北京同立钧成知识产权代理有限公司 | 代理人: | 宋扬;刘芳 |
| 地址: | 100191 北京市海*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 实时 文本 分级 监控 方法 装置 | ||
1.一种实时流式文本分级监控方法,其特征在于,包括:
实时获取流式的短文本;
对所述短文本进行数据清洗、数据补齐和数据过滤处理,生成结构化数据;
对所述结构化数据进行文本分词处理,获得K个词;所述K为大于0的整数;
根据敏感词数据库,对所述K个词进行敏感分析,获得所述短文本的敏感值;
根据情感词数据库,对所述K个词进行情感分析,获得所述短文本的情感值;
根据所述敏感值与所述情感值,获得所述短文本所属的用户的监控等级;
其中,所述根据所述敏感值与所述情感值,获得所述短文本对应的用户的监控等级,包括:
根据所述敏感值和所述情感值,获得所述用户的初始监控等级;
根据所述用户的历史短文本,获得所述用户的历史监控等级;
根据所述用户的初始监控等级和所述历史监控等级,获得所述用户的监控等级。
2.根据权利要求1所述的方法,其特征在于,所述根据所述用户的历史短文本,获得所述用户的历史监控等级之前,还包括:
确定所述用户的初始监控等级大于第一预设监控等级。
3.根据权利要求1所述的方法,其特征在于,还包括:
标注所述K个词的词性;
根据所述K个词的词性,对所述K个词进行语义分析;
所述根据敏感词数据库,对所述K个词进行敏感分析,获得所述短文本的敏感值,包括:根据敏感词数据库,对语义分析后的所述K个词进行敏感分析,获得所述短文本的敏感值;
所述根据情感词数据库,对所述K个词进行情感分析,获得所述短文本的情感值,包括:根据情感词数据库,对语义分析后的所述K个词进行情感分析,获得所述短文本的情感值。
4.根据权利要求1所述的方法,其特征在于,所述敏感词数据库包括以下至少一种:网络统计的敏感词、预设的敏感词;
所述情感词数据库包括以下至少一种:网络统计的情感词、预设的情感词。
5.根据权利要求4所述的方法,其特征在于,还包括:
当所述用户的监控等级大于第二预设监控等级时,获取所述短文本的M个关键词;所述M为大于0的整数;
将所述M个关键词分别添加至所述敏感词数据库和所述情感词数据库中。
6.一种实时流式文本分级监控装置,其特征在于,包括:
第一获取模块,用于实时获取流式的短文本;
生成模块,用于对所述短文本进行数据清洗、数据补齐和数据过滤处理,生成结构化数据;
分词模块,用于对所述结构化数据进行文本分词处理,获得K个词;所述K为大于0的整数;
敏感分析模块,用于根据敏感词数据库,对所述K个词进行敏感分析,获得所述短文本的敏感值;
情感分析模块,用于根据情感词数据库,对所述K个词进行情感分析,获得所述短文本的情感值;
第二获取模块,用于根据所述敏感值与所述情感值,获得所述短文本所属的用户的监控等级;
其中,所述第二获取模块,包括:
第一获取子模块,用于根据所述敏感值和所述情感值,获得所述用户的初始监控等级;
第二获取子模块,用于根据所述用户的历史短文本,获得所述用户的历史监控等级;
第三获取子模块,用于根据所述用户的初始监控等级和所述历史监控等级,获得所述用户的监控等级。
7.根据权利要求6所述的装置,其特征在于,所述第二获取模块,还包括:
确定子模块,用于在所述第二获取子模块根据所述用户的历史短文本,获得所述用户的历史监控等级之前,确定所述用户的初始监控等级大于第一预设监控等级。
8.根据权利要求6所述的装置,其特征在于,还包括:标注模块和语义分析模块;
所述标注模块,用于标注所述K个词的词性;
所述语义分析模块,用于根据所述K个词的词性,对所述K个词进行语义分析;
所述敏感分析模块,具体用于根据敏感词数据库,对语义分析后的所述K个词进行敏感分析,获得所述短文本的敏感值;
所述情感分析模块,具体用于根据情感词数据库,对语义分析后的所述K个词进行情感分析,获得所述短文本的情感值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京航空航天大学,未经北京航空航天大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710058647.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种数据列映射方法及系统
- 下一篇:一种基于深度学习的图片情感极性分析方法





