[发明专利]一种基于日志采集的分析预警方法

摘要

本发明属于计算机操作系统技术领域，其公开了一种基于日志采集的分析预警方法，解决传统技术中不能实时分析预警的问题，同时实现定制化预警方案。本发明采用日志采集软件获取整个系统的运行日志，通过实时大数据分析技术将日志进行分析，准确的获得日志中的信息；采用分布式集群查询实时处理后的日志内容，同时对已经上线的预警任务进行实时监控，当查询的结果符合预警任务的预警规则时，获取该任务的具体负责人并发送邮件，完成整个系统的精准分布式准实时查询预警任务。

主权项

一种基于日志采集的分析预警方法，其特征在于，包括以下步骤：a.分析目标系统的运行过程并进行日志输出；b.自定义flume source，实现对日志目录和文件的实时采集；自定义flume sink，将采集的event事件发送到kafka；c.采用Storm作为实时分析组件，分析kafka中的日志信息,将kafka作为storm的spout数据源读取数据，根据业务需求提取日志中的有效信息，然后将结构化和非结构化的日志分别存储到不同的mongo数据库；d.在前端新建日志预警规则，建立预警任务并设置任务要求；e.提交预警任务请求，经过管理员审核通过后将该任务具体配置信息存储到数据库中；f.对各预警任务进行实时监控。