[发明专利]基于聚类分析的异常数据识别方法、系统和存储介质在审
| 申请号: | 201911134406.8 | 申请日: | 2019-11-19 |
| 公开(公告)号: | CN110941648A | 公开(公告)日: | 2020-03-31 |
| 发明(设计)人: | 朱子朋;程伟平;龙志宏 | 申请(专利权)人: | 广州市自来水有限公司 |
| 主分类号: | G06F16/2458 | 分类号: | G06F16/2458;G06K9/62 |
| 代理公司: | 广州嘉权专利商标事务所有限公司 44205 | 代理人: | 黎扬鹏 |
| 地址: | 510600 广*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 基于 聚类分析 异常 数据 识别 方法 系统 存储 介质 | ||
1.基于聚类分析的异常数据识别方法,其特征在于,包括以下步骤:
获取各监测点的历史监测数据,历史监测数据包括:压力数据和/或流量数据;
获取各监测点的主要参数,主要参数包括:历史监测数据的均值和/或标准方差;
对各监测点间历史监测数据的相关性进行聚类分析;
根据聚类分析的结果,将监测点的历史监测数据进行线性拟合处理,得到拟合函数;
根据拟合函数得到监测点数据的预测值;
根据历史监测数据、预测值以及主要参数对监测点数据进行异常识别。
2.根据权利要求1所述的基于聚类分析的异常数据识别方法,其特征在于:所述获取各监测点的历史监测数据的步骤中,包括以下步骤:
基于预设的数据同步误差要求,以预设的时间间隔为采样周期获取历史监测数据;
以监测点为单元对获取的历史监测数据进行存储。
3.根据权利要求1所述的基于聚类分析的异常数据识别方法,其特征在于:还包括以下步骤:
对历史监测数据进行预处理并储存,其中,预处理的步骤包括:
将错误数据的内容替代为空集;
通过历史监测数据的均值对空集进行填充处理。
4.根据权利要求1所述的基于聚类分析的异常数据识别方法,其特征在于:所述对各监测点间历史监测数据的相关性进行聚类分析的步骤中,包括以下步骤:
将各监测点作为不同的分类对象,计算两两分类对象之间的距离;
找出距离最小的两个分类对象,并将所述两个分类对象合并为一个新的分类对象;
根据合并得到的新的分类对象,计算两两分类对象之间的距离,返回执行找出距离最小的两个分类对象,并将所述两个分类对象合并为一个新的分类对象的步骤,直至所有分类对象合并为一个分类对象。
5.根据权利要求4所述的基于聚类分析的异常数据识别方法,其特征在于:所述将各监测点作为不同的分类对象,计算两两分类对象之间的距离的步骤中,包括以下步骤:
将任意两个分类对象作为两个向量;
计算所述两个向量之间的欧氏距离。
6.根据权利要求1所述的基于聚类分析的异常数据识别方法,其特征在于:所述根据聚类分析的结果,将监测点的历史监测数据进行线性拟合处理,得到拟合函数的步骤中,包括以下步骤:
将相关系数的值大于预设阈值的历史监测数据进行线性拟合处理,得到拟合函数。
7.根据权利要求1所述的基于聚类分析的异常数据识别方法,其特征在于:所述根据历史监测数据、预测值以及主要参数对监测点数据进行异常识别的步骤中,包括以下步骤:
计算预测值与历史监测数据的差值;
判断所述差值是否大于被预测监测点的2倍标准方差;
若是,则确认监测点数据异常;
反之,则确认监测点数据正常。
8.基于聚类分析的异常数据识别系统,其特征在于,包括:
第一获取模块,用于获取各监测点的历史监测数据,历史监测数据包括:压力数据和/或流量数据;
第二获取模块,用于获取各监测点的主要参数,主要参数包括:历史监测数据的均值和/或标准方差;
分析模块,用于对各监测点间历史监测数据的相关性进行聚类分析;
处理模块,用于根据聚类分析的结果,将监测点的历史监测数据进行线性拟合处理,得到拟合函数;
预测模块,用于根据拟合函数得到监测点数据的预测值;
判断模块,用于根据历史监测数据、预测值以及主要参数对监测点数据进行异常识别。
9.基于聚类分析的异常数据识别系统,其特征在于,包括:
至少一处理器;
至少一存储器,用于存储至少一程序;
当所述至少一程序被所述至少一处理器执行,使得所述至少一处理器实现如权利要求1-7任一项所述基于聚类分析的异常数据识别方法。
10.存储介质,存储有处理器可执行的指令,其特征在于:处理器执行所述处理器可执行的指令时执行如权利要求1-7任一项所述基于聚类分析的异常数据识别方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州市自来水有限公司,未经广州市自来水有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911134406.8/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





