[发明专利]时序数据异常检测方法、装置、计算机设备和存储介质有效
| 申请号: | 201910243107.1 | 申请日: | 2019-03-28 |
| 公开(公告)号: | CN109978379B | 公开(公告)日: | 2021-08-24 |
| 发明(设计)人: | 邹勇杰;陈宇;王博;陈云 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
| 主分类号: | G06Q10/06 | 分类号: | G06Q10/06;G06F16/2458;G06F17/16;G06F17/18 |
| 代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 宋合成 |
| 地址: | 100085 北京市*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 时序 数据 异常 检测 方法 装置 计算机 设备 存储 介质 | ||
1.一种时序数据异常检测方法,其特征在于,包括:
从待检测的指标数据中采集距离当前时刻第一预设时间长度内的指标数据;
利用预先训练的变分自编码器对所述距离当前时刻第一预设时间长度内的指标数据进行解码、编码处理,确定所述距离当前时刻第一预设时间长度内的指标数据对应的均值向量,其中,所述均值向量中的元素值是所述距离当前时刻第一预设时间长度内的指标数据的预测值;
根据所述距离当前时刻第一预设时间长度内的指标数据对应的均值向量及所述距离当前时刻第一预设时间长度内的指标数据,确定所述距离当前时刻第一预设时间长度内的指标数据对应的异常得分;
根据所述异常得分与预设阈值的关系,确定所述距离当前时刻第一预设时间长度内的指标数据是否异常。
2.如权利要求1所述的方法,其特征在于,所述利用预先训练的变分自编码器对所述距离当前时刻第一预设时间长度内的指标数据进行解码、编码处理之前,还包括:
对所述距离当前时刻第一预设时间长度内的指标数据进行标准化及缺失点填充处理。
3.如权利要求1所述的方法,其特征在于,所述确定所述距离当前时刻第一预设时间长度内的指标数据对应的异常得分,包括:
根据所述距离当前时刻第一预设时间长度内的指标数据对应的均值向量,计算所述距离当前时刻第一预设时间长度内每个指标数据的偏差值;
根据所述距离当前时刻第一预设时间长度内每个指标数据的偏差值及所述距离当前时刻第一预设时间长度内的指标数据对应的均值向量,确定所述距离当前时刻第一预设时间长度内的指标数据对应的异常得分。
4.如权利要求1所述的方法,其特征在于,所述确定所述距离当前时刻第一预设时间长度内的指标数据对应的均值向量之后,还包括:
根据所述距离当前时刻第一预设时间长度内的指标数据对应的均值向量,计算所述距离当前时刻第二预设时间长度内每个指标数据的偏差值,其中,所述第二预设时间长度小于所述第一预设时间长度;
根据所述距离当前时刻第二预设时间长度内每个指标数据的偏差值及所述距离当前时刻第一预设时间长度内的指标数据对应的均值向量,确定所述距离当前时刻第二预设时间长度内的指标数据对应的异常得分。
5.如权利要求1-4任一所述的方法,其特征在于,所述利用预先训练的变分自编码器对所述距离当前时刻第一预设时间长度内的指标数据进行解码、编码处理之前,还包括:
获取所述待检测的指标的历史数据;
对所述历史数据进行预处理,生成训练样本数据;
利用所述训练样本数据对初始变分自编码器进行训练,生成训练后的变分自编码器。
6.如权利要求5所述的方法,其特征在于,所述对所述历史数据进行预处理,生成训练样本数据,包括:
根据所述待检测的指标的时序特性,将所述历史数据进行分割、聚类处理,得到多个数据簇;
根据多个数据簇中包含的数据组数量,从所述多个数据簇中获取训练正样本数据。
7.如权利要求6所述的方法,其特征在于,所述从所述多个数据簇中获取训练正样本数据之后,还包括:
根据所述训练正样本数据中的数据量,在所述训练正样本数据中随机插入异常数据。
8.如权利要求6或7任一所述的方法,其特征在于,所述对所述历史数据进行预处理,生成训练样本数据,包括:
根据所述待检测的指标的历史数据对应的采集模式,确定所述历史数据中的数据缺失点及缺失点注入概率;
将所述历史数据中的数据缺失点,用预设的数值填充;
根据所述缺失点注入概率及缺失点填充后的历史数据中包含的数据点数量,将缺失点填充后的历史数据中的部分数据点用预设的数值替换,生成训练数据;
将所述训练数据进行数据分割,生成所述训练样本数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910243107.1/1.html,转载请声明来源钻瓜专利网。
- 同类专利
- 专利分类
G06Q 专门适用于行政、商业、金融、管理、监督或预测目的的数据处理系统或方法;其他类目不包含的专门适用于行政、商业、金融、管理、监督或预测目的的处理系统或方法
G06Q10-00 行政;管理
G06Q10-02 .预定,例如用于门票、服务或事件的
G06Q10-04 .预测或优化,例如线性规划、“旅行商问题”或“下料问题”
G06Q10-06 .资源、工作流、人员或项目管理,例如组织、规划、调度或分配时间、人员或机器资源;企业规划;组织模型
G06Q10-08 .物流,例如仓储、装货、配送或运输;存货或库存管理,例如订货、采购或平衡订单
G06Q10-10 .办公自动化,例如电子邮件或群件的计算机辅助管理
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





