[发明专利]一种基于日志采集的分析预警方法

权利要求书

1.一种基于日志采集的分析预警方法，其特征在于，包括以下步骤：

a.分析目标系统的运行过程并进行日志输出；

b.自定义flume source，实现对日志目录和文件的实时采集；自定义flume sink，将采集的event事件发送到kafka；

c.采用Storm作为实时分析组件，分析kafka中的日志信息,将kafka作为storm的spout数据源读取数据，根据业务需求提取日志中的有效信息，然后将结构化和非结构化的日志分别存储到不同的mongo数据库；

d.在前端新建日志预警规则，建立预警任务并设置任务要求；

e.提交预警任务请求，经过管理员审核通过后将该任务具体配置信息存储到数据库中；

f.对各预警任务进行实时监控。

2.如权利要求1所述的一种基于日志采集的分析预警方法，其特征在于，

步骤f具体包括：

f1.预警任务控制器读取预警任务的存储位置，获取该任务的相关信息；

f2.预警控制器确认该任务已上线后，调用查询接口对mongo数据库的数据按照索引进行查询；

f3.预警控制器按照预警规则对获取的查询数据进行匹配，如果有匹配结果，并且该结果数目达到了发送邮件的次数，则发送邮件，保存发送邮件的时间；

f4.当发送邮件后，程序根据设定的监控频率再次运行，若再次到达发送邮件的要求，则检查上次发送邮件的时间，若两次时间间隔未达到发送邮件间隔，则不发送；若已超过时间间隔，则再次发送；

f5.重复f1～f4步骤，实现预警的实时性。

3.如权利要求2所述的一种基于日志采集的分析预警方法，其特征在于，步骤f1中，所述任务的相关信息包括：上下线状态、规则、监控频率、邮件发送人信息。

4.如权利要求1所述的一种基于日志采集的分析预警方法，其特征在于，步骤c中，Kafka作为消息中间件用以解决采集数据速度和处理速度不同步的情况。

5.如权利要求1所述的一种基于日志采集的分析预警方法，其特征在于，步骤d中，所述任务要求包括预警监控频率、对应的预警任务负责人。