[发明专利]一种基于zookeeper的多源数据广域访问系统及方法

说明书

本发明公开了一种基于zookeeper的多源数据广域访问系统及方法，广域网络内，各数据源端是分布式数据库的子节点，同时也是分布式数据查询服务的提供方；子节点内数据库服务器，应用服务器，总线服务器，入口代理服务器协调运行对外提供完整的数据查询服务；数据调用客户端由第二应用服务器和出口代理服务器组成。本发明避免了在传统服务部署后，单一的查询服务故障时，所有数据都无法查询的情况，缩小故障的影响范围，具有良好的应用前景。

技术领域

本发明涉及一种基于ZooKeeper的多源数据广域访问系统及方法，属于电力调度自动化技术领域。

背景技术

在泛在互联背景下，各类电力资源大数据整合汇集，传统的单节点存储系统无法接入电网内所有细节设备的运行状态及模型数据。一些非直接调度的设备运行数据信息无需统一存储，数据的分布式存储势在必行，而当设备的运行信息存放在设备所属调度机构的数据库中时，上层调度机构无法直接浏览数据，不能对全网运行情况有整体的把控。

除此之外，传统的单节点服务，在服务宕机之后，就无法浏览全部的数据信息，这样影响的将是全网范围内的调度控制。

发明内容

目的：为了缓解集中式数据存储带来的服务器压力，实现数据分布式存储与远程调阅，本发明提供一种基于ZooKeeper的多源数据广域访问系统及方法，缓解上层调度机构服务器的存储压力，缩小单节点数据查询服务故障的影响范围。在服务网络范围内，搭建分布式服务总线并注册发布各自的数据查询服务。在客户端查询数据时，根据被查询数据所属单位进行服务寻址，服务通过出口代理服务进行服务及请求数据进行出口代理，对端入口代理服务接收数据查询请求，进行数据的查询反馈，实现大数据背景下，数据的分布式存储与查询，具有良好的应用前景。

技术方案：为解决上述技术问题，本发明采用的技术方案为：

一种基于ZooKeeper的多源数据访问方法，包括以下步骤：

步骤1，在广域网络内，各数据源端作为分布式数据库子节点。

步骤2，数据源端定义数据模型，根据数据模型属性生成唯一ID，各数据源端以统一的表结构存储数据模型。

步骤3，数据源端以数据模型某一时刻的运行状态为条件，以统一的表结构存储数据模型的运行数据表。

步骤4，订阅需要查询的数据模型记录，接收查询条件并根据查询条件，以SELECT语句在数据源端中获取结果集。

步骤5，使用服务总线对查询服务进行管理。

步骤6，通过代理服务定位数据模型所在区域，从该区域服务总线获取查询服务，转发查询条件。

步骤7，运行数据源端查询服务，获取查询结果。

作为优选方案，所述分布式数据库服务由达梦数据库，kingbase数据库，informix数据库提供。

作为优选方案，表结构的各字段对应数据模型的各个特征，包括模型ID，模型名称，所属区域。

作为优选方案，运行数据表的主键为查询条件，其他字段为可查询数据，其中查询条件包括模型ID，数据时间，数据类型。

作为优选方案，所述步骤4具体包括如下步骤：

第一步：将数据源端所有数据模型记录导出离线文件提供给数据查询方，或者以http页面的形式给数据查询方动态展示数模型记录。

第二步：数据查询方订阅需要查询运行数据的数据模型。

第三步：根据时间，模型ID，数据类型属性生成查询条件。