[发明专利]一种基于大数据技术的电力费控方法及系统

说明书

本发明提供一种基于大数据技术的电力费控方法及系统，以解决传统电力费控系统对大数据量数据存储能力弱、计算性能低、系统稳定性差的问题。基于大数据技术的电力费控方法具体是:1.通过分布式存储技术完成大数据量的数据写入、查询和更新。2.利用分布式内存计算引擎，实现整个算费流程的数据存储、校核和计算。3.采用分布式文件系统、集群资源调度和大数据集群作为基础架构，使系统的物理节点可以进行动态的扩充和移除。本发明提供了海量数据的存储能力和高性能的数据计算与分析能力，增加了费控系统的水平扩展能力以降低硬件成本，提升了系统容错性，增强了费控计算的稳定性，有力支撑了大数据技术在电力费控中的应用。

技术领域：

本发明涉及一种基于大数据技术的电力费控方法及系统，属于电力营销技术领域。

背景技术：

电力营销系统是供电企业信息化管理的核心应用，必须确保系统的高性能和高可靠性。费控业务作为电力营销系统的一个重要组成部分，要求每天对数千万计量点进行表码数据处理和全量的电量电费计算，且要求在3至4小时内完成，其无论是数据量、计算频率还是计算性能的要求都远远超出了传统的电费计算功能。而传统电力费控方法所采用的数据存储和数据计算模式，对海量数据的处理存在局限性，表现为存储效率低、计算性能弱和计算可靠性差，进而影响营销系统的稳定性。

发明内容：

本发明的目的在于克服上述已有技术的不足而提供一种海量数据的存储能力和高性能的数据计算与分析能力，增加了费控系统的水平扩展能力以降低硬件成本，提升了系统容错性，增强了费控计算的稳定性，有力支撑了大数据技术在电力费控中的应用的电力费控方法及系统。

本发明的目的可以通过如下措施来达到：一种基于大数据技术的电力费控系统，其特征在于其包括用于数据准备、收集计量系统的原始抄表数据并进行解析的抄表数据管理模块和计量表码管理模块，还包括用于对收集来的计量表码信息进行数据校核、数据计算与归档和数据分析的工作的表码处理模块，量费计算模块、量费归档模块、量费校核模块和余额分析模块；

所述的抄表数据管理模块用于收集费控计算的基础数据，包括计量档案表、电费算法参数表、计量点变压器关系表和公摊电量电价关系表，并利用分布式存储技术通过对这些表中的数据进行抽取、转化、分区及校验将最终结果存储到费控系统的分布式数据库中；

所述的计量表码管理模块负责接收电力计量系统上传到FTP服务器的计量表码文件，将文件转化成分布式易处理的文件格式，通过利用分布式消息队列技术实现数据的缓冲和存储，文件内容主要包括供电单位编码、计量点编号、资产编号、用户编号、抄表日期、正反向有功电量和正反向无功电量；

所述的表码处理模块用于抄表数据和计量表码数据的关联和质量检验，质量检验内容包括数据逻辑错误检验和业务规则错误检验，数据逻辑错误检验包括字段值格式检验、非空字段空值检验，业务规则错误检验包括本期抄表时间与上期抄表时间早晚检验、抄表起码与抄表止码大小检验，对于未通过检验的数据进行标记，不参与费控计算；

所述的量费计算模块采用并行的方式将表码处理模块的结果数据加载，利用量费计算模块中的算法库进行电量计算和电费计算，电量计算内容主要包括抄见电量、换表电量、退补电量、总分表电量、定比定量电量、公用表公摊电量、变损电量和线损电量；电费计算内容包括电度电费、基金及附加电费、基本电费和功率因数调整电费；

所述的量费归档模块主要对量费计算模块的计算过程和结果存储到分布式存储系统中，为后续的量费结果展示、量费校核和量费追溯功能服务；利用量费计算模块的存储输出接口统一的方式，将不同单元的计算结果以不同方式保存到指定目标（包括数据库表、日志文件、控制台），不仅对最终结果进行了存储，还对整个计算过程的每一个中间过程以时间轴的方式进行记录；