[发明专利]可配置规则化日志切分与报警监控的系统及方法

说明书

本发明提供了一种可配置规则化日志切分与报警监控的系统及方法，包括：模块M1：在日志收集任务时，配置日志源，基于配置的日志源抓取原始日志；模块M2：在日志切分任务时，将抓取的原始日志根据日志清洗规则进行日志切分；模块M3：在配置告警任务时，选择切分后的日志，并配置告警规则以及告警对象，从而实现了一个或多个相关联的报警任务。本发明可以自定义监控系统运行的日志，自定义日志切分规则、设定报警规则，并发送告警信息。保障了相关人员对系统的自动化监控，以及对问题的及时响应和排查。

技术领域

本发明涉及自动化监控系统，具体地，涉及可配置规则化日志切分与报警监控的系统及方法，广泛应用于信息化/智慧化生产场景中的定制化日志提取与报警监控。

背景技术

工业生产过程中，实际项目部署的生产环境，开发人员都没有权限登陆，更没有权限去后台服务查看日志信息；一旦服务出了问题，排查原因非常困难。排查问题时，开发人员需要联系相关的运维人员，请运维人员查找日志，而运维人员常常又不知道需要哪一部分日志，如此造成不能及时响应问题，带来很大损失。因此，现有技术中，存在日志在后台源源不断的输出，而开发人员看不到日志，排查问题困难的技术问题；

后台日志的信息量通常都是非常庞大的，而我们关心的，并不是日志的全部内容，而是其中的某些关键信息。人工去解析日志，提取关键信息，耗时耗力，稍有不慎，还容易出错，导致不能正确和及时地定位问题。因此，现实应用中还存在日志信息规模庞大，日志解析工作耗时耗力的技术问题；

对于上线的项目，如果运行日志异常，单靠人工去监控，很难在海量的日志中迅速定位找到异常位置。由此，会导致系统在异常的情况下继续运转，造成的损失也是相对可观的。因此，在现有技术中，存在运行出错，相关人员毫不知情的技术问题。

专利文献CN112882898A(申请号：202110206816.X)公开了一种基于大数据日志分析的异常检测方法、系统、设备及介质，所述方法包括S1：基于应用系统的第一设定时限内的错误日志数量数据对应用系统的各工程进行聚类，确认各工程的类型并获取不同类型工程的异常检测模型，提取各工程在第二设定时限内的历史数据，根据应用系统的日志内容数据获取知识库；S2：获取各工程在检测时限内的错误日志数量数据，根据各工程的类型将各工程在检测时限内的错误日志数量数据、在第二设定时限内的历史数据送入对应的异常检测模型，获取异常数据，根据知识库对异常数据进行处理，获取检测结果。

发明内容

针对现有技术中的缺陷，本发明的目的是提供一种可配置规则化日志切分与报警监控的系统及方法。

根据本发明提供的一种可配置规则化日志切分与报警监控的系统，包括：

模块M1：在日志收集任务时，配置日志源，基于配置的日志源抓取原始日志；

模块M2：在日志切分任务时，将抓取的原始日志根据日志清洗规则进行日志切分；

模块M3：在配置告警任务时，选择切分后的日志，并配置告警规则以及告警对象，从而实现了一个或多个相关联的报警任务。

优选地，配置日志监控任务，包括查看所有任务列表、按名称精确查询任务、创建任务、删除任务以及启停任务；

所述启停任务包括：对于已配好的任务，根据业务需要开启或者停止任务，减少资源的占用，同时满足监控需求。

优选地，所述配置日志源包括配置应用系统名称、收集日志的主机、日志路径以及日志的清洗规则。

优选地，通过主机配置管理模块查看集群的主机列表以及主机的ip、配置以及运行状态。

优选地，所述模块M2采用：

模块M2.1：基于google blockly提供可视可拖拽的配置切分规则或基于XML代码配置日志的切分规则