[发明专利]基于日志文件的监控方法、系统、设备及可读存储介质有效
申请号: | 202110483490.5 | 申请日: | 2021-04-30 |
公开(公告)号: | CN113176978B | 公开(公告)日: | 2023-07-21 |
发明(设计)人: | 许佳兴;黄河;叶奇 | 申请(专利权)人: | 平安壹钱包电子商务有限公司 |
主分类号: | G06F11/30 | 分类号: | G06F11/30 |
代理公司: | 北京英特普罗知识产权代理有限公司 11015 | 代理人: | 饶文彬 |
地址: | 518033 广东省深圳市福田区福田*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 日志 文件 监控 方法 系统 设备 可读 存储 介质 | ||
1.一种基于日志文件的监控方法,其特征在于,所述方法包括:
实时采集目标终端集群中每一个终端的日志文件并存储到消息队列中;
依次从所述消息队列中拉取符合目标字段的目标日志文件,并提取所述目标日志文件中的内容字段;
将预设的监控规则对所述内容字段进行匹配,以筛选出匹配的目标日志文件,得到目标日志文件集;
根据预设的监听规则分析所述目标日志文件集,并根据分析结果生成监控结果;
所述将预设的监控规则对所述内容字段进行匹配,以筛选出匹配的目标日志文件,得到目标日志文件集包括:
基于预设的正则表达式对每一个所述目标日志文件的内容字段进行模糊匹配,以提取候选字段;
通过敏感信息识别规则对所述候选字段进行识别,筛选出匹配的候选字段对应的目标日志文件,得到目标日志文件集,所述预设的监控规则包括所述预设的正则表达式与所述敏感信息识别规则;
所述根据预设的监听规则分析所述目标日志文件集,并根据分析结果生成监控结果包括:
获取所述目标日志文件集中的相同日志文件名称的日志文件;
求和计算所述相同日志文件名称的日志文件的出现次数;
若所述日志文件的出现次数满足预先设置的监听规则,生成日志文件对应的终端的监控结果。
2.如权利要求1所述的基于日志文件的监控方法,其特征在于,所述实时采集目标终端集群中每一个终端的日志文件数据并存储到消息队列中之前,包括:
控制监控程序根据预先设置的数据采集规则收集每一个所述终端上应用程序产生的日志文件,所述数据采集规则包括实时采集规则;
将所述日志文件存储于所述目标终端集群中的每一个终端中。
3.如权利要求2所述的基于日志文件的监控方法,其特征在于,所述实时采集目标终端集群中每一个终端的日志文件并存储到消息队列中包括:
向所述监控程序发送日志采集指令,以控制所述监控程序根据所述日志采集指令获取每一个所述终端上的日志文件;
将采集到的所述日志文件存储到预设的消息队列中。
4.如权利要求1所述的基于日志文件的监控方法,其特征在于,所述根据预设的监听规则分析所述目标日志文件集,并根据分析结果生成监控结果之后,还包括:
将所述分析结果存储于时序数据库中;
通过所述时序数据库将所述分析结果生成报表发送给目标用户进行查看。
5.如权利要求4所述的基于日志文件的监控方法,其特征在于,所述根据预设的监听规则分析所述目标日志文件集,并根据分析结果生成监控结果之后,还包括:
从配置管理中心获取目标用户的消息渠道;
将所述监控结果通过所述消息渠道发送给所述目标用户进行查看。
6.一种基于日志文件的监控系统,其特征在于,所述系统包括:
采集模块,用于实时采集目标终端集群中每一个终端的日志文件并存储到消息队列中;
提取模块,用于依次从所述消息队列中拉取符合目标字段日志文件,并提取所述日志文件中的内容字段;
匹配模块,用于将预设的监控规则对所述内容字段进行匹配,以筛选出匹配的日志文件,得到目标日志文件集;
分析模块,用于根据预设的监听规则分析所述目标日志文件集,并根据分析结果生成监控结果;
所述匹配模块还用于:
基于预设的正则表达式对每一个所述目标日志文件的内容字段进行模糊匹配,以提取候选字段;通过敏感信息识别规则对所述候选字段进行识别,筛选出匹配的候选字段对应的目标日志文件,得到目标日志文件集,所述预设的监控规则包括所述预设的正则表达式与所述敏感信息识别规则;
所述分析模块还用于:
获取所述目标日志文件集中的相同日志文件名称的日志文件;求和计算所述相同日志文件名称的日志文件的出现次数;若所述日志文件的出现次数满足预先设置的监听规则,生成日志文件对应的终端的监控结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安壹钱包电子商务有限公司,未经平安壹钱包电子商务有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110483490.5/1.html,转载请声明来源钻瓜专利网。