[发明专利]一种基于算法组态和分布式流计算的大数据分析平台装置及方法

摘要

一种基于算法组态和分布式流计算的大数据分析平台装置及方法，包括依次连接的数据源获取装置、数据整合单元、时序数据存储器、计算单元、无线终端和数据服务终端，可以快速、高效、及时地处理海量实时数据，保证计算效率高效，灵活和可扩展强，同时保证设备安全、稳定、高效地运行。

主权项

一种基于算法组态和分布式流计算的大数据分析平台装置，包括依次连接的数据源获取装置、数据整合单元、时序数据存储器、计算单元、无线终端和数据服务终端，其中数据服务终端还分别与时序数据存储器、数据源获取装置和无线终端连接，其特征在于：数据源获取装置，用于获取设备监测数据和常规的设备数据，并发送至数据整合单元；数据整合单元，用于以接收来自数据源获取装置发送的设备监测数据和常规的设备数据，经过预处理后将结果发送给时序数据存储器；时序数据存储器，用于存储预处理后的数据和配置数据，并且将访问频度高、性能要求高的数据集中缓存到时序数据存储器中的内存器；计算单元，用于驱动调度引擎来调用和接收时序数据存储器存储的数据，并且依据预先编排好的处理逻辑对调用和接收的数据进行处理，训练形成数据挖掘模型，其中计算单元包括多个子计算单元，多个子计算单元按照实际业务需求动态配置，每个子计算单元独立存在，能够根据行业专家经验独立演化，采用分布式的流式计算引擎对调用和接收的数据进行计算后实时输出，回传到时序数据存储器和/或数据服务端；数据服务端，包括数据服务端处理器、接口单元和显示装置，其中数据服务端处理器用于从时序数据存储器直接读取数据和/或接收来自计算单元处理后的数据，并且进行分析处理，将处理后的结果通过显示装置进行显示，同时通过接口单元将处理后的结果发送给无线终端；无线终端，用于接收来自数据服务端发送的处理后的结果，并且能够无线发送控制命令至数据服务端，数据服务端接收到控制命令后控制数据源获取装置，调整数据源获取装置的数据采集频率。