[发明专利]一种应用于政务舆情分析平台在审
| 申请号: | 201910646839.5 | 申请日: | 2019-07-17 |
| 公开(公告)号: | CN110472119A | 公开(公告)日: | 2019-11-19 |
| 发明(设计)人: | 刘建城;杨嘉欣;杨嘉烨 | 申请(专利权)人: | 广东鼎义互联科技股份有限公司 |
| 主分类号: | G06F16/951 | 分类号: | G06F16/951;G06F16/335;G06Q50/26 |
| 代理公司: | 11465 北京慕达星云知识产权代理事务所(特殊普通合伙) | 代理人: | 曹鹏飞<国际申请>=<国际公布>=<进入 |
| 地址: | 519000 广东省珠海市*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 舆情分析 数据采集模块 数据存储模块 数据应用模块 挖掘分析模块 机器学习 智能加工 自动发现 自动分类 多维度 可伸缩 监控 并发 应用 抽取 清洗 存储 分析 预警 发送 挖掘 转换 | ||
1.一种应用于政务舆情分析平台,其特征在于,包括:
数据采集模块:用于数据的抽取、清洗和转换;
数据存储模块:对所述数据采集模块发送的数据进行存储;
挖掘分析模块:对所述数据存储模块中的数据进行分析与智能加工;
数据应用模块:对挖掘分析得到的数据进行监控与应用。
2.根据权利要求1所述的一种应用于政务舆情分析平台,其特征在于,所述数据采集模块包括对结构化数据和非结构化数据采集。
3.根据权利要求2所述的一种应用于政务舆情分析平台,其特征在于,所述数据采集模块采用kettle工具对所述结构化数据采集,数据来源包括关系数据库;采用Python爬虫技术对所述非结构化数据采集,数据来源包括HTML网页数据;采用flume对所述非结构化数据采集,数据来源包括日志文件。
4.根据权利要求3所述的一种应用于政务舆情分析平台,其特征在于,所述数据存储模块包括分布式文件系统HDFS和分布式数据库HBase,所述分布式文件系统HDFS存储所述flume采集的原始日志文件,所述分布式数据库HBase存储所述kettle工具采集的结构化数据、所述Python爬虫爬取的HTML网页数据以及所述flume采集的日志文件进行抽取、清洗和转换后的数据。
5.根据权利要求1所述的一种应用于政务舆情分析平台,其特征在于,所述挖掘分析模块采用Spark进行数据挖掘分析。
6.根据权利要求5所述的一种应用于政务舆情分析平台,其特征在于,所述挖掘分析模块包括数据挖掘和数据分析。
7.根据权利要求6所述的一种应用于政务舆情分析平台,其特征在于,所述数据挖掘包括文本过滤、文本分类、文本聚类、文本自动分词、主题词抽取和关联关系挖掘。
8.根据权利要求6所述的一种应用于政务舆情分析平台,其特征在于,所述数据分析包括用户画像、情感分析、趁势分析、话题分析和热点发现。
9.根据权利要求1所述的一种应用于政务舆情分析平台,其特征在于,所述数据应用模块采用Elasticsearch技术对非关系数据进行全文检索。
10.根据权利要求9所述的一种应用于政务舆情分析平台,其特征在于,所述数据应用模块包括人物监控、事件追踪、舆情预警、舆情智能分析、舆情报告和舆情知识库。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广东鼎义互联科技股份有限公司,未经广东鼎义互联科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910646839.5/1.html,转载请声明来源钻瓜专利网。





