[发明专利]一种基于大数据的信息收集分析系统

权利要求书

1.一种基于大数据的信息收集分析系统，其特征在于，包括：

数据挖掘模型构建模块，用于基于数据收集规则生成对应的数据挖掘模型；

数据分析模型构建模块，用于基于录入的数据分析目标生成对应的数据分析模型；

数据挖掘模块，用于采用网络爬虫模块基于数据挖掘模型实现目标数据的挖掘，生成目标数据集；

数据分析模块，用于为每一个目标数据集配置一个计算节点，并为每一个计算节点配置对应的数据分析模型，基于Hadoop同步运行数据分析模型实现目标数据集的分布式分析，得到对应的数据分析结果。

2.如权利要求1所述的一种基于大数据的信息收集分析系统，其特征在于，所述数据挖掘模型构建模块内载数据挖掘模型训练程序和数据模型更新程序，每更新一次数据收集规则，数据挖掘模型训练程序/数据模型更新程序运行一次。

3.如权利要求1所述的一种基于大数据的信息收集分析系统，其特征在于，所述数据分析模型构建模块内载数据分析模型训练程序和数据分析模型更新程序，每更新一次数据分析目标，数据分析模型训练程序/数据分析模型更新程序运行一次。

4.如权利要求1所述的一种基于大数据的信息收集分析系统，其特征在于，还包括：

数据填充模块，用于基于NMKNN填充算法实现所采集到的目标数据的填充处理。

5.如权利要求1所述的一种基于大数据的信息收集分析系统，其特征在于，还包括：

分析报表编制模块，用于基于预设的模板实现数据分析报表的编制。

6.如权利要求1所述的一种基于大数据的信息收集分析系统，其特征在于，还包括：数据收集规则编制模块，用于根据录入的数据分析目标，基于网络爬虫模块根据数据分析目标实现与其存在关联关系的数据的挖掘，然后基于主成分法获取所挖掘到的数据的特征参数，即得数据收集规则。

7.如权利要求6所述的一种基于大数据的信息收集分析系统，其特征在于，所述数据收集规则编制模块基于Bi-LSTM+Attention模型实现与其存在关联关系的数据的挖掘。

8.如权利要求1所述的一种基于大数据的信息收集分析系统，其特征在于，还包括：自定义分析模块，用于根据用户预设的时间/数据对象/数据量区间，在到达预设的时间/或发现预设的数据对象/或到达预设的数据量区间时，启动对应的数据分析模型实现自定义区间内的目标数据集的分析。