[发明专利]一种基于分布式技术的用电信息采集主站系统

权利要求书

1.一种基于分布式技术的用电信息采集主站系统，其特征在于，包括通信层、存储层和应用层；

所述通信层，用于终端与主站通信链路建立与保持、通信报文转发、报文组装与解析，继而实现多任务高并发异步通信交互；

所述存储层，用于存储高频采集数据、日冻结数据与业务交互数据、统计数据以及全量采集数据，并基于历史数据进行挖掘性数据分析；

所述应用层，用于实现业务高级应用；

所述通信层与存储层互通，所述存储层与应用层互通。

2.根据权利要求1所述的一种基于分布式技术的用电信息采集主站系统，其特征在于，所述通信层包括通信前置机集群、调度前置机集群、采集前置机、采集网关集群、Kafka消息队列、入库服务集群；

所述通信前置机，用于维护采集主站与终端之间的远程通信链路，实现远程信道底层通信协议的心跳握手和链路连接，并完成终端上下行数据原始通讯报文的收发；

所述调度前置机，用于将来自采集前置机的通信报文，按通信优先级、终端并发通信量进行通信控制，并将响应报文转发给采集前置机；

所述采集前置机，用于将通信任务按规约类型调用规约插件组装通信报文，并将经加密机加密的报文进行二次封装后发送给通信前置机，接收通信前置机转发的终端上行报文，识别规约，调用对应规约插件解析报文，并将解析的结构化数据发送给任务调度模块；

所述采集网关集群，用于负责从Kafka消息队列获取通信请求，将通信请求按类别发送给采集前置机，接收采集前置机的返回数据，发送给Kafka消息队列；

所述Kafka消息队列，用于提供应用层异步通信，按不同的业务需求分主题进行交互，按信息分类规划队列主题，根据消息生产者与消费者的接点数量，设计消息主题分区数量，实现数据高效分发传送，具体包括下行请求消息队列、上行应答消息队列、流处理消息队列、解析数据消息队列；

所述入库服务模块，用于自动从消息队列获取数据进行入库操作，入库时根据数据类别，分别写入生产数据库或MySQL数据库。

3.根据权利要求1所述的一种基于分布式技术的用电信息采集主站系统，其特征在于，所述存储层采用多级存储机制，包括共享缓存Redis、分布式关系库、生产数据库、大数据平台；

所述共享缓存Redis，用于通过与Redis缓存档案关系及分析支撑数据，对接收的数据进行异常识别、修复，实现实时数据统计，并将分析结果和解析数据根据应用要求分别写入生产数据库或大数据HBase；

所述分布式关系库，采用MySQL数据库存储实时高频采集数据，用于实现采集数据的高效智能的水平拆分与分布式存储，解决大规模采集数据入库时高并发处理能力的需求，同时具备横向扩展的优势；

所述生产数据库，用于保存系统档案、工单、日冻结数据或通过高频数据进行统计、分析、抽取的数据以及通过大数据分析平台分析的结果数据，再写入生产数据库；

所述大数据平台，采用Hadoop系列组件HBase及Spark进行构建，用于存储大量全量历史数据，并基于历史数据进行挖掘分析。

4.根据权利要求1所述的一种基于分布式技术的用电信息采集主站系统，其特征在于，所述应用层包括Web应用集群和业务服务集群；

所述Web应用集群，用于人机交互，完成业务操作，采用Web网页方式实现；

所述业务微服务集群，用于采集主站对支撑的业务进行抽象、融合，对系统业务进行纵向拆分，构建档案管理、权限认证、费控管理、采集、统计查询等业务服务，采用管理业务服务的注册与访问路由，简化应用层的访问，发布平台业务应用接口规范。

5.根据权利要求3所述的一种基于分布式技术的用电信息采集主站系统，其特征在于，所述共享缓存Redis，通过与Redis缓存档案关系及分析支撑数据，对接收的数据进行异常识别、修复，实现实时数据统计，并将分析结果和解析数据根据应用要求分别写入生产数据库或大数据HBase。