[发明专利]一种数据处理的系统及方法

说明书

一种数据处理的系统及方法，包括：消息队列服务器、两个或两个以上子系统实例模块、两个或两个以上历史数据模块；其中，消息队列服务器用于：进行消息的发布订阅；各子系统实例模块分别设置相应的实时数据库，用于：与相应的监控系统进行实时通讯，以获取相应的实时数据；将获取的实时数据封装为消息后发布到消息队列服务器；各历史数据模块分别设置相应的历史数据库，用于：按照预设的映射关系，从消息队列服务器订阅一个或一个以上子系统实例模块封装的消息。本发明实施例降低了集控中心系统的复杂度，提升了实时数据的监控效率。

技术领域

本文涉及但不限于信息处理技术，尤指一种数据处理的系统及方法。

背景技术

随着信息技术的发展，人们对工业生产过程的监控需求也在不断提升，不仅要在工厂内部对生产过程进行监控，管辖多个工厂的集团公司通常希望对下属工厂的生产过程进行集中监控，因此提出了远程/区域集中监控中心(本文简称为集控中心)的要求；这类集控中心通常需要接入多个生产单位的数据，并对实时数据进行图形化呈现，同时还可能向生产单位发送控制指令。集控中心的实时数据采集节点数通常达到几十万甚至上百万，鉴于此历史存储的要求也有相应的提升。

目前，集控中心通常以大规模的实时数据库为中心，实时数据被写入实时数据库后，用户从实时数据库读取所需的实时数据；实时数据库中的非实时数据按照预设策略存储到历史数据库中。

当前，集控中心一般采集的节点数通常为十万以下，当采集的节点数达到百万时，为了保证集控中心的实时性，需要对实时数据库进行复杂的优化和结构设计，增加了系统的实现难度，提升了开发和维护成本；为了承载高性能的实时数据库和历史数据库，需要高性能的计算机硬件；计算机性能与成本的提升呈非线性关系，对服务器性能的质量要求提高，意味着硬件成本也相应升高；为了解决硬件性能和成本的问题，在数据存储时采用了集群或虚拟化技术，在高性能的虚拟主机上运行实时数据库和历史数据库，但集群或虚拟化技术的应用，加剧了集控中心系统的复杂度，为开发和维护集控中心带来更多困难，难于实现扩展。而在单体硬件基础上实现的大规模实时数据库和历史数据库，其容量受硬件性能限制，难以实现扩展；且在对系统进行扩容时，通常需要暂停整个系统，影响实时数据的有效监控。

发明内容

以下是对本文详细描述的主题的概述。本概述并非是为了限制权利要求的保护范围。

本发明实施例提供一种数据处理的系统及方法，能够简化集控中心系统的复杂度，提升实时数据的监控效率。

本发明实施例一种数据处理的系统，包括：消息队列服务器、两个或两个以上子系统实例模块、两个或两个以上历史数据模块；其中，

消息队列服务器用于：进行消息的发布订阅；

各子系统实例模块分别设置相应的实时数据库，用于：与相应的监控系统进行实时通讯，以获取相应的实时数据；将获取的实时数据封装为消息后发布到消息队列服务器；

各历史数据模块分别设置相应的历史数据库，用于：按照预设的映射关系，从消息队列服务器订阅一个或一个以上子系统实例模块封装的消息。

可选的，所述系统还包括地址单元，用于：

为各所述子系统实例模块分配相应的第一地址信息；和/或，

为各所述历史数据模块分配相应的第二地址信息；

其中，所述第一地址信息用于进行所述消息的订阅；所述第二地址信息用于从各所述历史数据模块查询所述历史数据模块存储的所述消息。

可选的，所述系统还包括：用户入口模块和用户代理模块；其中，

所述用户入口模块用于：对用户账户进行权限鉴定；

用户代理模块用于：为通过权限鉴定的用户账户提供实时数据接口，以为用户账户提供实时监控服务；