[发明专利]一种网络流量的统计方法、装置、电子设备及存储介质有效
申请号: | 201810387680.5 | 申请日: | 2018-04-26 |
公开(公告)号: | CN110417609B | 公开(公告)日: | 2021-02-09 |
发明(设计)人: | 何丹 | 申请(专利权)人: | 中移(苏州)软件技术有限公司;中国移动通信集团有限公司 |
主分类号: | H04L12/26 | 分类号: | H04L12/26;G06F9/48 |
代理公司: | 北京同达信恒知识产权代理有限公司 11291 | 代理人: | 郭润湘 |
地址: | 215163 江*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 网络流量 统计 方法 装置 电子设备 存储 介质 | ||
1.一种网络流量的统计方法,其特征在于,所述方法包括:
根据Flow流的数据量,采用第一设定数量的上行线程对所述Flow流进行第一处理,并将处理后的Flow流写入到缓存队列;
采用第二设定数量的下行线程,对所述缓存队列中被写入的Flow流进行第二处理,其中,每一个所述上行线程与每一个所述下行线程的处理能力相同;
如果所述缓存队列被写满,增加第一数量的所述下行线程;
如果所述缓存队列为空,删除第二数量的所述下行线程;
其中,所述上行线程为解析线程,所述下行线程为归并线程;
当所述上行线程为解析线程,所述下行线程为归并线程时,所述方法还包括:
获取所述解析线程对Flow流进行解析之后生成的所述Flow流的第一会话级视图;
根据哈希函数Hash(key)=(key*7)mod(len),对所述第一会话级视图中的源IP地址进行归并计算,生成关于所述源IP地址的第一哈希表,其中key是哈希函数的自变量,len为第一预设表长,7为预设质数;
根据预设统计周期以及所述第一哈希表,计算出所述第一哈希表中每一个所述源IP地址在每一个所述预设统计周期内的流速,并对所述第一哈希表中每一个所述源IP地址在每一个所述预设统计周期内的流量数据进行更新。
2.如权利要求1所述的方法,其特征在于,所述增加第一数量的所述下行线程之后,所述方法还包括:
将所述缓存队列的缓存队列长度增加第一预设单位长度;
所述删除第二数量的所述下行线程之后,所述方法还包括:
将所述缓存队列的缓存队列长度减小第二预设单位长度。
3.如权利要求1所述的方法,其特征在于,所述删除第二数量的所述下行线程包括:
根据每个下行线程的启动时间,确定启动时间较晚的第二数量的目标下行线程,删除所述目标下行线程。
4.如权利要求1所述的方法,其特征在于,所述方法还包括:
根据所述哈希函数Hash(key)=(key*7)mod(len),对所述第一会话级视图中的源IP地址、目的IP地址、源端口、目的端口以及协议类型进行归并计算,生成关于所述第一会话级视图的第二哈希表,其中key是哈希函数的自变量,len为第二预设表长,7为预设质数;
根据预设统计周期以及所述第二哈希表,对所述第二哈希表中每一个所述第一会话级视图在每一个所述预设统计周期内的流量数据进行更新。
5.一种电子设备,其特征在于,所述电子设备包括:第一处理器和第一存储器;
所述第一处理器,用于读取所述第一存储器中的程序,执行下列过程:根据Flow流的数据量,采用第一设定数量的上行线程对所述Flow流进行第一处理,并将处理后的Flow流写入到缓存队列;采用第二设定数量的下行线程,对所述缓存队列中被写入的Flow流进行第二处理,其中,每一个所述上行线程与每一个所述下行线程的处理能力相同;如果所述缓存队列被写满,增加第一数量的所述下行线程;如果所述缓存队列为空,删除第二数量的所述下行线程;
其中,所述上行线程为解析线程,所述下行线程为归并线程;
所述第一处理器,还用于当所述上行线程为解析线程,所述下行线程为归并线程时,获取所述解析线程对Flow流进行解析之后生成的所述Flow流的第一会话级视图;根据哈希函数Hash(key)=(key*7)mod(len),对所述第一会话级视图中的源IP地址进行归并计算,生成关于所述源IP地址的第一哈希表,其中key是哈希函数的自变量,len为第一预设表长,7为预设质数;根据预设统计周期以及所述第一哈希表,计算出所述第一哈希表中每一个所述源IP地址在每一个所述预设统计周期内的流速,并对所述第一哈希表中每一个所述源IP地址在每一个所述预设统计周期内的流量数据进行更新。
6.如权利要求5所述的电子设备,其特征在于,增加第一数量的所述下行线程之后,所述第一处理器还用于将所述缓存队列的缓存队列长度增加第一预设单位长度;删除第二数量的所述下行线程之后,所述第一处理器还用于将所述缓存队列的缓存队列长度减小第二预设单位长度。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中移(苏州)软件技术有限公司;中国移动通信集团有限公司,未经中移(苏州)软件技术有限公司;中国移动通信集团有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810387680.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种协议自动匹配的装置和方法
- 下一篇:存储系统延迟孤立点检测