[发明专利]基于能源数据采集后数据质量检测的方法在审
申请号: | 201710981028.1 | 申请日: | 2017-10-20 |
公开(公告)号: | CN107908663A | 公开(公告)日: | 2018-04-13 |
发明(设计)人: | 范平新 | 申请(专利权)人: | 南京亚派软件技术有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 南京源古知识产权代理事务所(普通合伙)32300 | 代理人: | 马晓辉 |
地址: | 210032 江苏*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 能源 数据 采集 质量 检测 方法 | ||
技术领域
本发明涉及一种基于能源数据采集后数据质量检测的方法,可以被所有能源采集平台、系统使用,同时为各能源管理平台、系统所获取和应用。在能源管理解决方案中对能源计量设备的一种数据质量的监测,涉及所有分类能源计量领域,包括各种能源分类分项的设备,含电表、水表、气表、热能表、氧气表等。
背景技术
在能源相关管理系统中,数据的质量一直是一个比较难解决的问题,主要表现在:设备层数据本身不稳定,设备故障导致的设备数据不按实际值上报的比例相当高;网络环境因素导致的数据上报值错位;设备所测量的环境不稳定,导致环境数据异常等。这些数据如果不进行屏蔽或有效的杜绝,直接影响能源相关管理系统的稳定性和实际使用数据计算的正确性。
发明内容
本发明主要解决的问题是能源相关管理系统中数据采集后数据的质量监测问题,判断数据是否真实、有效、可用,判断所测量的环境是否异常。屏蔽因测量设备损坏、线路接错、通讯线路断链、设备数据跳变等引起的设备数据异常,同时可以监测所监测的环境数据是否正常合理,这些环境数据包含电压、电流等遥测数据,也包含正向有功电能等遥脉数据。
具体技术方案如下:
一种基于能源数据采集后数据质量检测的方法,在数据采集器获取系统设备的原始数据并发送给数据采集服务平台后,数据采集服务平台对获取的原始数据进行质量检测,其特征在于:首先根据系统设备设置数据的正常范围值,然后数据采集服务平台的数据质量检测模块将获取的原始数据与正常范围值进行比较,判断原始数据是否为正常状态;正常则进行入库操作,异常则通过接口供其他模块进行调用和处理。原始数据的类型包括遥脉数据、遥测数据、遥信数据、事件类型数据。数据质量检测模块在从数据采集器获取数据时进行数据质量的判断检测,或者在数据采集服务平台存储数据后进行数据质量的判断检测。
针对遥脉数据进行数据质量检测时,设置遥脉数据的正常范围值,包含最大值和最小值;数据质量检测模块在获取到原始数据后,判断目前遥脉数据为正常或非正常状态,进而判断设备本身功能是否正常或数据已经越限,正常则进行入库操作,异常则通过接口供其他模块进行调用和处理;同时对于正常状态的遥脉数据,计算固定粒度时间的实际使用值,通过与历史数据或预置设定值的对比获取增长比例或下降比例,与设定的增长比例或下降比例进行比较,其中对比的方式有:同比值、环比值、预设使用值。如果在正常范围,则进行入库操作;如果非正常范围,则通过接口供其他模块进行调用和处理。
针对遥测数据进行数据质量检测时,设置遥测数据的正常范围值,包含最大值和最小值;数据质量检测模块在获取到原始数据后,判断目前遥测数据为正常或非正常状态,进而判断设备所检测的环境数据是否超限和不正常,遥测数据正常则进行入库操作,异常则通过接口供其他模块进行调用和处理。
针对遥信数据、事件类型数据进行数据质量检测时,设置数据的正常范围值,数据质量检测模块在获取到原始数据后,判断数据为正常或非正常状态,正常则进行入库操作,异常则通过接口供其他模块进行调用和处理。
本发明的优点是:支持多种能源相关管理系统数据类型的原始数据、统计数据的质量判断,提高能源相关管理系统的数据质量分析手段,通过设备数据质量的监测,很容易找出系统数据问题的真正原因。同时对于各个数据类型的逻辑业务判断进行了程序的模块化处理,在后续增加数据类型的情况下,减少相关代码的重新编写,可以进行有效的复用。
针对遥脉数据,数据质量检测可以有效地监测出设备错误的遥脉示数,在设置设备初始遥脉值和设备最大遥脉值的情况,通过和系统中“告警管理”的联动,可以提供判断设备的质量有效依据;通过设备的不正常值可以判断是否需要更换设备的依据。
针对遥测数据,通过设置参数的范围,数据质量检测可以判断出目前遥测数据为正常或非正常状态,从而判断设备所检测的环境数据是否超限和不正常,如电网的电压、电流。
针对于遥信、事件类型的定义,数据质量检测方法可以有效屏蔽无用的网络数据,为后续的数据存储、数据有用性判断提供依据。
数据质量检测可以在页面上显示异常的数据值,同时给其他模块功能或第三方系统提供异常数据接口,做到异常数据共享。
附图说明
图1为遥测数据质量判断流程。
图2为遥脉数据质量判断流程。
图3为遥信、事件类型数据质量判断流程。
具体实施方式
下面结合附图对本发明内容作说明:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京亚派软件技术有限公司,未经南京亚派软件技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710981028.1/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置