[发明专利]一种异常流量数据的检测方法及系统有效
| 申请号: | 201810444291.1 | 申请日: | 2018-05-10 |
| 公开(公告)号: | CN108737406B | 公开(公告)日: | 2020-08-04 |
| 发明(设计)人: | 王小娟;张勇;金磊;陈旭;由靖文;陈墨;宋梅 | 申请(专利权)人: | 北京邮电大学 |
| 主分类号: | H04L29/06 | 分类号: | H04L29/06;G06K9/62;G06N3/04;G06N3/08 |
| 代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 王莹;吴欢燕 |
| 地址: | 100876 *** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 异常 流量 数据 检测 方法 系统 | ||
1.一种异常流量数据的检测方法,其特征在于,包括:
将待检测流量数据包中的任一条流量数据的特征输入至训练好的自动编码器模型或主成分分析模型中,以获取所述任一条流量数据对应的评分;
若所述评分大于预设异常门限,则判定所述任一条流量数据为异常流量数据;
其中,所述训练好的自动编码器模型的训练步骤如下:
构建所述自动编码器模型的第一目标函数;
在训练集上对所述第一目标函数进行训练,以使所述第一目标函数最小;
其中,构建所述第一目标函数L的公式如下:
其中,xi为将第i条流量数据的所有特征,xi′为将第i条流量数据的所有特征输入至自动编码器模型得到的输出向量,h为稀疏参数,hj为隐藏层中第j个神经元的活跃度;
其中,所述训练好的主成分分析模型的训练步骤如下:
构建所述主成分分析模型的第二目标函数;
在训练集上对所述第二目标函数进行训练,以使所述第二目标函数最大;
其中,构建所述第二目标函数M的公式如下:
其中,di为第i条流量数据的所有特征维度,为第i条重构流量数据的所有特征维度,W为各维度的特征权值。
2.根据权利要求1所述的方法,其特征在于,所述将待检测流量数据包中的任一条流量数据的特征输入至训练好的自动编码器模型或主成分分析模型中,以获取所述任一条流量数据对应的评分,之前还包括:
获取所述任一条流量数据的原始特征,其中,所述原始特征包括统计特征和/或字符特征;
将所述原始特征进行标准化,以获取所述任一条流量数据的特征;
其中,标准化的公式如下:
其中,为待检测流量数据包中第k条流量数据的第i个特征,为待检测流量数据包中第k条流量数据的第i个原始特征。
3.根据权利要求2所述的方法,其特征在于,所述获取所述任一条流量数据的原始特征,进一步包括:
获取所述任一条流量数据的http请求字段;
在所述http请求字段中,获取所述任一条流量数据的请求响应码、响应尺寸、请求参数、请求字符频率熵、请求字符频率和请求路径中的一种或任意多种,并作为所述任一条流量数据的统计特征;
基于n-gram算法,获取所述任一条流量数据的字符特征;
将所述统计特征和/或所述字符特征作为所述任一条流量数据的原始特征。
4.根据权利要求1所述的方法,其特征在于,所述自动编码器模型的网络结构包括输入层、若干个隐藏层和输出层;
其中,所述若干个隐藏层中任一隐藏层的神经元个数为5-8个,所述输入层和所述输出层的尺寸一致,每一隐藏层和所述输出层连接有偏置单元。
5.一种异常流量数据的检测系统,其特征在于,包括:
特征输入模块,用于将待检测流量数据包中的任一条流量数据的特征输入至训练好的自动编码器模型或主成分分析模型中,以获取所述任一条流量数据对应的评分;
异常流量数据判定模块,用于若所述评分大于预设异常门限,则判定所述任一条流量数据为异常流量数据;
其中,所述异常流量数据的检测系统,还用于构建所述自动编码器模型的第一目标函数;在训练集上对所述第一目标函数进行训练,以使所述第一目标函数最小;
其中,构建所述第一目标函数L的公式如下:
其中,xi为将第i条流量数据的所有特征,xi′为将第i条流量数据的所有特征输入至自动编码器模型得到的输出向量,h为稀疏参数,hj为隐藏层中第j个神经元的活跃度;
其中,所述异常流量数据的检测系统,还用于构建所述主成分分析模型的第二目标函数;
在训练集上对所述第二目标函数进行训练,以使所述第二目标函数最大;
其中,构建所述第二目标函数M的公式如下:
其中,di为第i条流量数据的所有特征维度,为第i条重构流量数据的所有特征维度,W为各维度的特征权值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京邮电大学,未经北京邮电大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810444291.1/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





