[发明专利]基于大数据的质量分析方法、系统及存储介质

权利要求书

1.基于大数据的质量分析方法，其中，包括：

获取终端产生的数据，并监测所获取的数据是否符合预设规则；

若所获取数据符合预设规则，则存储符合预设规则的数据，并根据所存储数据编写评分规则，以监测所存储数据在被应用时的流转过程；

判断所存储数据在被应用时的变化程度是否达到异常阈值；

若达到异常阈值，发出错误警示。

2.根据权利要求1所述的基于大数据的质量分析方法，其中，所述获取终端产生的数据，并监测所获取的数据是否符合预设规则，之后还包括：

若所获取数据不符合预设规则，则发出错误警示。

3.根据权利要求1所述的基于大数据的质量分析方法，其中，监测所获取的数据是否符合预设规则包括：

监测获取终端产生数据的响应时间是否在预设时间范围内；

或分析所获取数据的数据结构是否符合预设的数据结构变化范围；

或判断所获取数据的日总量是否超出预设数据总量。

4.根据权利要求1所述的基于大数据的质量分析方法，其中，存储符合预设规则的数据，并根据所存储数据编写评分规则具体为：

存储符合预设规则的数据，并根据预设数据汇总规则统计所存储数据的日总量，进而根据所汇总的日总量编写评分规则。

5.根据权利要求4所述的基于大数据的质量分析方法，其中，存储符合预设规则的数据，并根据预设数据汇总规则统计所存储数据的日总量，进而根据所汇总的日总量编写评分规则，之后包括：

监测所汇总数据的日总量是否达到预设评分值；

若否，则发出错误警示。

6.根据权利要求1所述的基于大数据的质量分析方法，其中，获取终端所产生数据的路径至少包括kafka消息队列、http接口和FTP服务器中一种。

7.根据权利要求1所述的基于大数据的质量分析方法，其中，监测所存储数据在被应用时的流转过程包括：

根据数据流转的生命周期，监测所存储数据在被应用时，是否存在数据丢失或者数据落地的时间是否在合理时间范围内。

8.一种系统，其中，包括相互关联的：

数据采集监控模块，用于获取终端产生的数据，并监测所获取的数据是否符合预设规则；

数据仓储监控模块，用于存储符合预设规则的数据，并根据所存储数据编写评分规则，监测所存储数据的评分是否超过预设评分值；

数据应用监控模块，用于监测所获取数据在被应用时的流转过程，并监测所存储数据在被应用时的变化程度是否达到异常阈值。

9.根据权利要求8所述的系统，其中，还包括相互关联的：

规则引擎模块，用于录入应用于数据采集监控模块的预设规则，应用于数据仓储监控模块的预设评分值，和应用于数据应用监控模块的异常阈值；

任务调度引擎模块，用于管理数据在系统中的任务启动、暂停或恢复。

警示通知模块，用于管理用户信息，并将规则引擎模块所触发的错误警示进行通知。

10.一种存储介质，其中，所述存储介质存储有计算机程序，所述计算机程序能够被执行以用于实现如权利要求1-7任一项所述的基于大数据的质量分析方法。