[发明专利]一种智能数据分析系统及方法

说明书

本申请公开了一种智能数据分析系统及方法，系统包括：智能预处理模块用于接收控制模块的操作指令，通过预置神经网络模型对预置采集数据进行预处理操作，得到预处理数据，预处理操作包括：去噪、去重和文字翻译；跟踪模块用于接收控制模块的跟踪指令，根据设置的预处理数据的特征值对预处理数据进行实时跟踪，得到实时数据，并生成数据逻辑分析图；控制模块用于在跟踪模块中获取跟踪数据，对跟踪数据进行归类、去重和时间标记的分析操作，得到分析数据，如果分析数据不满足阈值条件，则继续进行分析操作。本申请解决了现有的数据分析技术对当前的数据采集的发展不具备普适性和高效性的技术问题。

技术领域

本申请涉及数据分析技术领域，尤其涉及一种智能数据分析系统及方法。

背景技术

数据分析是指用适当的统计分析方法对收集来的大量数据进行分析，提取有用信息和形成结论而对数据加以详细研究和概括总结的过程。这一过程也是质量管理体系的支持过程。在实用中，数据分析可帮助人们作出判断，以便采取适当行动；数据分析的数学基础在20世纪早期就已确立，但直到计算机的出现才使得实际操作成为可能，并使得数据分析得以推广；数据分析是数学与计算机科学相结合的产物。数据分析主要包含：简单数学运算(Simple-Math)；统计(Statistics)；快速傅里叶变换(FFT)；平滑和滤波(Smoothing-and-Filtering)；基线和峰值分析(Baseline-and-Peak-Analysis)。

在互联网行业快速发展的今天，数据采集领域已经发生了重要的变化。不仅分布式控制应用场合中的智能数据采集系统在国内外已经取得了长足的发展；而且总线兼容型数据采集插件的数量不断增大，与个人计算机兼容的数据采集系统的数量也在增加。对于这样的大环境下的数据发展，凭借现有的数据分析和去噪得出所需要的数据的方法是针对不同的数据作出多种不同数据分析操作，每次针对新数据都需要将之前的分析工作重复，非常的浪费资源。

发明内容

本申请提供了一种智能数据分析系统及方法，用于解决现有的数据分析技术对当前的数据采集的发展不具备普适性和高效性的技术问题。

有鉴于此，本申请第一方面提供了一种智能数据分析系统，包括：智能预处理模块、跟踪模块和控制模块；

所述智能预处理模块，用于接收所述控制模块的操作指令，通过预置神经网络模型对预置采集数据进行预处理操作，得到预处理数据，所述预处理操作包括：去噪、去重和文字翻译；

所述跟踪模块，用于接收所述控制模块的跟踪指令，根据设置的所述预处理数据的特征值对所述预处理数据进行实时跟踪，得到实时数据，并生成数据逻辑分析图；

所述控制模块，用于在所述跟踪模块中获取跟踪数据，对所述跟踪数据进行归类、去重和时间标记的分析操作，得到分析数据，如果所述分析数据不满足阈值条件，则继续进行所述分析操作，所述跟踪数据包括所述实时数据。

优选地，还包括：数据采集模块；

所述数据采集模块，用于建立采集模型，利用所述采集模型在大数据平台或者系统主机上采集不同类别和领域的数据，得到所述预置采集数据，发送至所述智能预处理模块，所述预置采集数据包括文章、日志、数据包和审计记录。

优选地，还包括：异常检测模块；

所述异常检测模块，用于将获取的所述预处理数据输入到预置入侵检测分析引擎中根据预置入侵检测规则进行异常分析检测，得到检测结果。

优选地，所述异常检测模块具体用于：

采用已知异常类型的预置样本数据训练所述预置入侵检测分析引擎，建立所述预置入侵检测规则，将输入到所述预置入侵检测分析引擎中的所述预处理数据与所述预置入侵检测规则进行匹配，确定异常类型，得到检测结果。

优选地，还包括：执行模块；