[发明专利]日志监控方法、装置、电子设备及可读存储介质

说明书

本发明涉及数据处理，揭露一种日志监控方法，包括：实时获取服务器集群各个节点的第一日志集合，对第一日志集合执行清洗处理，得到第二日志集合；将第二日志集合中的日志分配到多个任务池中，对多个任务池执行排序处理，得到任务池序列，对各个任务池中的日志执行排序处理，得到各个任务池对应的日志序列，基于任务池序列及日志序列对多个任务池中的日志排序，得到日志任务队列；对日志任务队列中的日志执行关键词匹配处理；当某一指定日志与其对应的关键词集合中某一指定关键词匹配成功时，获取指定关键词对应的处理策略，执行所述处理策略。本发明还提供一种日志监控装置、电子设备及可读存储介质。本发明实现了及时发现日志中的异常字符。

技术领域

本发明涉及数据处理领域，尤其涉及一种日志监控方法、装置、电子设备及可读存储介质。

背景技术

随着互联网技术的发展，服务器集群的应用越来越广泛，为了保证服务器集群的正常运行，通常需要从硬件层面(例如，CPU负载、内存资源、网卡等)和软件层面对服务器集群中各个节点进行全面的监控。

当前，通常通过监控服务器集群中各节点对应的日志中是否出现异常字符判断各节点的软件系统是否异常，然而因日志的产生量巨大，且服务器集群中不同节点对应不同的系统，导致产生的日志类型不同，从而日志的分析、处理较为缓慢。因此，亟需一种日志监控方法，以及时发现日志中的异常字符。

发明内容

鉴于以上内容，有必要提供一种日志监控方法，旨在及时发现日志中的异常字符。

本发明提供的日志监控方法，包括：

实时获取服务器集群中各个节点产生的第一日志集合，对所述第一日志集合执行清洗处理，得到各个节点对应的第二日志集合；

确定所述第二日志集合中各个日志的日志类别，根据所述日志类别将所述第二日志集合中的日志分配到多个任务池中，对所述多个任务池执行第一排序处理，得到任务池序列，对各个任务池中的日志执行第二排序处理，得到各个任务池对应的日志序列，基于所述任务池序列及日志序列对所述多个任务池中的日志排序，得到日志任务队列；

从第一数据库中获取各种日志类别的日志对应的关键词集合，基于所述关键词集合对所述日志任务队列中的日志执行关键词匹配处理；

当某一指定日志与其对应的关键词集合中某一指定关键词匹配成功时，从第二数据库中获取所述指定关键词对应的处理策略，执行所述处理策略，并将关键词匹配结果及所述处理策略发送到预设客户端。

可选的，所述对所述第一日志集合执行清洗处理，得到各个节点对应的第二日志集合，包括：

剔除所述第一日志集合中日志格式不是预设格式的日志，得到第三日志集合；

剔除所述第三日志集合中日志名称中含有预设字符的日志，得到第二日志集合。

可选的，所述基于所述关键词集合对所述日志任务队列中的日志执行关键词匹配处理，包括：

将所述日志任务队列中排序最前的待匹配日志的内容作为待匹配字符串，抽取所述待匹配日志对应的关键词集合中第一个关键字作为标准字符串；

将所述待匹配字符串与所述标准字符串左对齐，以标准字符串从左往右的移动方式、以字符从右往左的匹配顺序将所述标准字符串与所述待匹配字符串进行匹配，当所述待匹配字符串中出现与所述标准字符串完全匹配的字符串，或者当所述标准字符串的尾部字符与所述待匹配字符串的尾部字符对齐时，结束本次匹配；

抽取所述待匹配日志对应的关键词集合中的下一个关键词作为新的标准字符串继续与所述待匹配字符串进行匹配，直至无法从所述待匹配日志对应的关键词集合中抽取新的关键词。

可选的，所述以标准字符串从左往右的移动方式、以字符从右往左的匹配顺序将所述标准字符串与所述待匹配字符串进行匹配，包括：