[发明专利]一种DNS日志压缩方法和装置有效
申请号: | 201610051795.8 | 申请日: | 2016-01-27 |
公开(公告)号: | CN105554181B | 公开(公告)日: | 2019-03-26 |
发明(设计)人: | 丁文涛;尹嘉路 | 申请(专利权)人: | 久远谦长(北京)技术服务有限公司 |
主分类号: | H04L29/12 | 分类号: | H04L29/12;H04L29/08;H04L12/24;G06F16/17;G06F16/18 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 100085 北京市昌*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种DNS日志压缩方法和装置,方法包括:步骤1)获取域名系统DNS原始日志;步骤2)根据DNS中的源IP地址、请求端口匹配Radius日志中该IP地址的认证信息;步骤3)判断所述DNS的域名是否属于260万域名;步骤4)当属于以上260万域名中的DNS时,则对所述DNS原始日志进行分析,并匹配用户账户、计算PV、访问时间点均值、访问时间点方差,最终多条记录的被合并成一条记录,同时删去原始日志。本发明采取了上述方案以后,实现DNS原始数据超过100个数量级的减少,在大幅降低DNS数据量的同时保证了数据的价值,具有很好的技术效果。 | ||
搜索关键词: | 一种 dns 日志 压缩 方法 装置 | ||
【主权项】:
1.一种DNS日志压缩方法,其特征在于,包括:步骤1)获取域名系统DNS原始日志,该原始日志中包括:源IP地址、源端口、目的IP地址、目的端口、ID、域名、请求类型、解析结果、解析时间、状态码、请求或者响应信息;步骤2)根据DNS中的源IP地址、请求端口匹配Radius日志中该IP地址的认证信息,Radius日志格式包括:用户账户、上线时间、下线时间、外网IP、内网IP、外网起始端口和外网结束端口,其中,只有DNS的请求端口在Radius的起始结束端口范围内,该DNS信息才有效;步骤3)使用Bloom过滤方法判断所述DNS的域名是否属于260万域名;260万域名是根据原始DNS日志,统计全国访问PV数大于3的域名;步骤4)当属于以上260万域名中的DNS时,则对所述DNS原始日志进行分析,并匹配用户账户、计算页面浏览量PV、访问时间点均值、访问时间点方差,最终多条记录被合并成一条记录,同时删去原始日志。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于久远谦长(北京)技术服务有限公司,未经久远谦长(北京)技术服务有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201610051795.8/,转载请声明来源钻瓜专利网。
- 上一篇:一种移动终端
- 下一篇:一种获取MAC地址匹配的手机号码的方法、装置和系统