[发明专利]行业舆情指数预测方法、装置、计算机设备及存储介质在审
申请号: | 201910079475.7 | 申请日: | 2019-01-28 |
公开(公告)号: | CN110009128A | 公开(公告)日: | 2019-07-12 |
发明(设计)人: | 吴壮伟 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06Q10/04 | 分类号: | G06Q10/04;G06F16/951 |
代理公司: | 深圳市精英专利事务所 44242 | 代理人: | 林燕云 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文本数据 集合 计算机设备 存储介质 评分结果 指数预测 正负面 神经网络模型 时间序列模型 行业领域 行业指数 预测模型 增长率 预测 网络 | ||
1.一种行业舆情指数预测方法,其特征在于,包括:
通过分布式爬虫中多个爬虫工具并行获取预设的实体经济行业领域在预设的时间段内的源数据,以得到源数据集;其中,所述源数据集中包括与实体经济行业领域个数相同的子数据集,每一子数据集对应一个实体经济行业领域,每一爬虫工具对应爬取一个实体经济行业领域的网址清单中网页内容;
对所述源数据集中每一子数据集的源数据均进行预处理,得到与各子数据集中包括的多篇文本数据一一对应的处理后数据,以组成与各子数据集对应的处理后数据集合;
将每一处理后数据集合中对应的各处理后数据作为预先训练得到的朴素贝叶斯模型的输入,得到与各处理后数据集合中每一文本数据对应的正负面评分结果;
将每一实体经济行业领域在所述时间段的正负面评分结果作为深度神经网络的输入,并将每一实体经济行业领域在所述时间段的行业GDP增长率作为深度神经网络的输出,进行训练得到与每一实体经济行业领域对应的深度神经网络模型;
获取所选定的实体经济行业领域,爬取当前年度的文本数据集合,获取与当前年度的文本数据集合中各文本数据一一对应的当前处理后数据,及与当前年度的文本数据集合中每一文本数据一一对应的当前年度正负面评分结果;以及
将与当前年度的文本数据集合中每一文本数据一一对应的当前年度正负面评分结果作为对应深度神经网络模型的输入,计算得到当前年度的文本数据对应的当前年度行业GDP增长率。
2.根据权利要求1所述的行业舆情指数预测方法,其特征在于,所述通过分布式爬虫中多个爬虫工具并行获取预设的实体经济行业领域在预设的时间段内的源数据,以得到源数据集,包括:
获取所述分布式爬虫中爬虫工具的个数,并获取每一爬虫工具所对应的实体经济行业领域的网址清单;
通过每一爬虫工具爬取对应的实体经济行业领域在所述时间段内的源数据,以组成对应的子数据集;
将每一爬虫工具对应爬取的源数据存储至对应的存储区域,以组成每一爬虫工具对应爬取的子数据集,并由各爬虫工具对应爬取的子数据集组成源数据集。
3.根据权利要求1所述的行业舆情指数预测方法,其特征在于,所述对所述源数据集中每一子数据集的源数据均进行预处理,得到与各子数据集中包括的多篇文本数据一一对应的处理后数据,以组成与各子数据集对应的处理后数据集合,包括:
将所述源数据集中每一子数据集所包括的多篇文本数据中各文本数据的标题和正文分别通过词频-逆文本频率指数模型进行关键词信息抽取,得到与各文本数据对应的标题关键词列表和正文关键词列表;
将每一文本数据对应的标题关键词列表和正文关键词列表进行封装组合,得到与每一文本数据对应的行业消息列表,以组成与各子数据集对应的处理后数据集合。
4.根据权利要求3所述的行业舆情指数预测方法,其特征在于,所述将每一处理后数据集合中对应的各处理后数据作为预先训练得到的朴素贝叶斯模型的输入,得到与各处理后数据集合中每一文本数据对应的正负面评分结果,包括:
获取每一处理后数据集合中对应的各处理后数据,及与各处理后数据对应的行业消息列表;
根据所述朴素贝叶斯模型获取以各行业消息列表中关键词为前提条件对应计算的后验概率,以作为与各行业消息列表对应的正负面评分结果。
5.根据权利要求4所述的行业舆情指数预测方法,其特征在于,所述根据所述朴素贝叶斯模型获取以各行业消息列表中关键词为前提条件对应计算的后验概率,以作为与各行业消息列表对应的正负面评分结果之后,还包括:
由每一实体经济行业领域中各行业消息列表对应的正负面评分结果,组成与每一实体经济行业领域对应的正负面评分结果序列。
6.根据权利要求5所述的行业舆情指数预测方法,其特征在于,所述将与当前年度的文本数据集合中每一文本数据一一对应的当前年度正负面评分结果作为深度神经网络的输入,包括:
获取所选定的实体经济行业领域在当前年度的正负面评分结果序列作为深度神经网络的输入。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910079475.7/1.html,转载请声明来源钻瓜专利网。
- 同类专利
- 专利分类
G06Q 专门适用于行政、商业、金融、管理、监督或预测目的的数据处理系统或方法;其他类目不包含的专门适用于行政、商业、金融、管理、监督或预测目的的处理系统或方法
G06Q10-00 行政;管理
G06Q10-02 .预定,例如用于门票、服务或事件的
G06Q10-04 .预测或优化,例如线性规划、“旅行商问题”或“下料问题”
G06Q10-06 .资源、工作流、人员或项目管理,例如组织、规划、调度或分配时间、人员或机器资源;企业规划;组织模型
G06Q10-08 .物流,例如仓储、装货、配送或运输;存货或库存管理,例如订货、采购或平衡订单
G06Q10-10 .办公自动化,例如电子邮件或群件的计算机辅助管理