[发明专利]错误日志过滤方法、装置、电子设备以及可读介质有效
申请号: | 202110282976.2 | 申请日: | 2021-03-16 |
公开(公告)号: | CN113010383B | 公开(公告)日: | 2023-08-01 |
发明(设计)人: | 兰建国;王明凯;蔡龙;李升起 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06F11/30 | 分类号: | G06F11/30 |
代理公司: | 北京市汉坤律师事务所 11602 | 代理人: | 姜浩然;吴丽丽 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 错误 日志 过滤 方法 装置 电子设备 以及 可读 介质 | ||
1.一种错误日志过滤方法,包括:
接收错误日志;
获取用于过滤所述错误日志的配置信息,其中,所述配置信息包括第一过滤信息、第二过滤信息和第三过滤信息,所述第一过滤信息包括抽样百分比,所述第二过滤信息包括第一数据组,所述第一数据组包括用于粗过滤的多个第一错误信息,所述第三过滤信息包括第二数据组,所述第二数据组包括用于细过滤的多个第二错误信息;
根据预设的随机函数生成用于抽样过滤的随机数,其中,所述随机数在0-1之间;
响应于确定所述随机数小于所述抽样百分比,过滤掉所述错误日志;
响应于确定基于所述第一过滤信息未能将所述错误日志过滤掉,遍历所述第一数据组,确定所述错误日志是否包含在所述第一数据组中;
响应于确定所述错误日志包含在所述第一数据组中,过滤掉所述错误日志;
响应于确定基于所述第二过滤信息未能将所述错误日志过滤掉,遍历所述第二数据组,将所述错误日志与所述多个第二错误信息中每个第二错误信息进行比对;以及
响应于确定所述错误信息与所述多个第二错误信息中的一个第二错误信息匹配,过滤掉所述错误日志。
2.根据权利要求1所述的方法,其中,获取用于过滤所述错误日志的配置信息包括:
响应于确定上报的所述错误日志是预设时间段内的首次上报,向第三方服务器发送请求,以请求从所述第三方服务器获取所述配置信息;以及
响应于确定上报的所述错误日志是所述预设时间段内的非首次上报,从本地缓存中获取所述配置信息。
3.根据权利要求2所述的方法,其中,还包括:
响应于确定上报的所述错误日志是所述预设时间段内的首次上报,将从所述第三方服务器获取的所述配置信息存入所述本地缓存中。
4.根据权利要求2所述的方法,其中,基于以下方式确定所述错误日志在所述预设时间段内是首次上报或非首次上报:
获取所述配置信息存入所述本地缓存的缓存时间;
获取当前时间;以及
基于所述缓存时间与所述当前时间的匹配情况,确定所述错误日志在所述预设时间段内是首次上报或非首次上报。
5.一种错误日志过滤装置,包括:
接收单元,配置为接收错误日志;
获取单元,配置为获取用于过滤所述错误日志的配置信息,其中,所述配置信息包括第一过滤信息、第二过滤信息和第三过滤信息,所述第一过滤信息包括抽样百分比,所述第二过滤信息包括第一数据组,所述第一数据组包括用于粗过滤的多个第一错误信息,所述第三过滤信息包括第二数据组,所述第二数据组包括用于细过滤的多个第二错误信息;
抽样过滤单元,配置为:
根据预设的随机函数生成用于抽样过滤的随机数,其中,所述随机数在0-1之间;以及
响应于确定所述随机数小于所述抽样百分比,过滤掉所述错误日志;
粗过滤单元,配置为:
响应于确定基于所述第一过滤信息未能将所述错误日志过滤掉,遍历所述第一数据组,确定所述错误日志是否包含在所述第一数据组中;以及
响应于确定所述错误日志包含在所述第一数据组中,过滤掉所述错误日志;
以及
细过滤单元,配置为:
响应于确定基于所述第二过滤信息未能将所述错误日志过滤掉,遍历所述第二数据组,将所述错误日志与所述多个第二错误信息中每个第二错误信息进行比对;以及
响应于确定所述错误信息与所述多个第二错误信息中的一个第二错误信息匹配,过滤掉所述错误日志。
6.根据权利要求5所述的装置,其中,所述获取单元还被配置为:
响应于确定上报的所述错误日志是预设时间段内的首次上报,向第三方服务器发送请求,以请求从所述第三方服务器获取所述配置信息;以及
响应于确定上报的所述错误日志是所述预设时间段内的非首次上报,从本地缓存中获取所述配置信息。
7.根据权利要求6所述的装置,其中,还包括:
存储单元,配置为响应于确定上报的所述错误日志是所述预设时间段内的首次上报,将从所述第三方服务器获取的所述配置信息存入所述本地缓存中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110282976.2/1.html,转载请声明来源钻瓜专利网。