[发明专利]基于海量数据的综合管理分析系统

说明书

技术领域

本发明涉及数据管理技术领域，具体涉及基于海量数据的综合管理分析系统。

背景技术

在带电作业管理过程中由于带电作业专业工作的专业性要求，往往会存在大量的作业数据和培训数据，在以往的管理中，对这些历史数据只能作为存档保留，无法很好的进行查询，更别说进行数据的挖掘和分析，因此需要通过建立一种基于海量数据的综合性管理和分析系统，以满足带电作业专业管理的要求，提高带电作业工艺质量和决策提供快速、高效、可靠的辅助决策支持手段。

系统主要以下几个方面考虑：

(1)带电作业是一项专业的管理技术，需要通过信息系统把带电作业专业标准进行规范化固化和管理，实现带电作业的自动化、智能化管理，以提高带电作业管理的规范化水平和管理效率；

(2)带电作业具有较高的专业性特点，对带电作业专业人员技能要求较高，需要通过信息系统建设完善的专业知识共享和培训沟通平台，以帮助带电作业人员提高专业技能，降低作业风险；

(3)带电作业是电网生产作业的重要组成部分，作业过程中产生的海量的各类数对设备状态评价和分析具有重要作用，需要建立基于海量数据分析的专业分析系统，对这些数据进行综合管理和分析应用；

(4)随着电网规模的急剧增长，电网范围内越来越多的带电作业工作，传统的管理模式规范性低、时效性差，已不能满足带电作业专业化管理的需要，但是由于其专业性的特点，目前尚缺少基于海量数据的特殊综合性的管理分析系统；

(5)随着公司信息化建设步伐的日趋加快，信息化建设要求越来越高，带电作业分公司作为电网公司新成立的分公司，在信息化建设方面基本为零，为 了满足信息化应用覆盖等要求，迫切需要建立分公司专业的综合分析系统，通过信息系统的推广应用，帮助提升分公司带电作业管理水平。

发明内容

本发明为了解决上述现有的技术缺点，提供一种基于海量数据的综合管理分析系统，其通过对带电作业专业领域的海量数据进行存储和分析，为提高带电作业工艺质量和决策支持提供快速、高效、可靠的辅助决策支持手段。

为实现上述目的，本发明提供一种基于海量数据的综合管理分析系统，包括依次连接的因特网、防火墙、核心交换机、负载均衡服务器、交换机及服务器集群，所述服务器集群包括多台服务器，数据分散存储在多台独立的服务器上，多台独立的服务器分担存储负荷，利用位置服务器定位存储信息，采用基于MapReduce的计算模型，通过分布式计算可以充分利用闲置计算机的计算能力把一个需要巨大的计算能力才能解决的问题分成多个部分，然后再将这些部分分配给多台服务器进行处理，最终将这些计算结果综合起来得到最终结果。

进一步的，所述系统采用分布式部署的架构，采用负载均衡技术，均衡每一台服务器的负载，从而保证每一个用户请求的访问速度。

所述负载均衡技术为将用户发送的请求，经过系统分析后转发到负载小的服务器上，同时响应用户的HTTP请求，分析请求，并转发到Web前端机上。

所述系统采用分布式任务调度技术，所述分布式任务调度技术采用分布式任务队列服务，用来以异步HTTP方式执行用户任务，所述系统创建任务队列，并插入任务，插入队列的任务随即会执行。

所述服务器集群中选任一台服务器作为总服务器，该总服务器管理服务器集群中其它服务器的服务状态以及服务器集群中服务器的增减，一旦有机器不能提供服务，总服务器重新分配服务策略。

本发明具有以下有益效果：

1、通过信息系统把带电作业专业标准进行规范化固化和管理，实现带电作业的自动化、智能化管理，以提高带电作业管理的规范化水平和管理效率。

2、通过信息系统建设完善的专业知识共享和培训沟通平台，以帮助带电作业人员提高专业技能，降低作业风险；

3、建立基于海量数据分析的专业分析系统，对作业过程中产生的海量的各类数据进行综合管理和分析应用，对设备状态评价和分析具有重要作用。

4、满足信息化应用覆盖等要求，通过信息系统的推广应用，帮助提升分公司带电作业管理水平。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本发明物理网络结构框图；

图2为发明分布式任务调度示意图。

具体实施方式