[发明专利]一种应用日志数据告警方法及装置

说明书

技术领域

本发明涉及计算机信息处理技术，尤其涉及一种应用日志数据告警方法及装置。

背景技术

目前，随着计算机技术的发展，互联网环境中各种应用的规模越来越庞大，产生的应用日志数据量也越来越多，且应用日志数据对于分析应用的性能和故障起到了非常重要的作用，因此，如何准确、全面、快速、高效地从海量的应用日志数据中获取到关键的性能和故障日志数据指标，对于应用在运行过程中产生的问题的定位、处理、服务质量的改善以及潜在问题的发现，有着非常重要的意义。

现有技术中，获取应用日志数据并进行分析目前可以通过采用Hadoop Mapreduce框架进行离线式的应用日志数据分析，如图3所示，将大的计算任务拆分成多个任务，分配到不同的计算节点执行并行计算，最后汇总计算结果。

而上述方案是使用静态离线式的方法对海量的应用日志数据进行分析，当应用在运行过程中出现异常或故障后，需要在应用运行周期结束后才可以将异常和故障原因分析出来，因此，上述方案无法实时、高效地对应用运行过程产生的故障进行处理。

发明内容

有鉴于此，本发明实施例期望提供一种应用日志告警方法及装置，能够自动、实时、准确、高效地获取应用在运行期间发生故障时的日志数据，并及时发出告警信息。

为达到上述目的，本发明实施例提供了一种应用日志数据告警方法，包括：

获取ELK平台所采集的应用日志数据；

基于预设规则，判断所述应用日志数据中是否有需要进行告警的告警数据，将告警数据存入数据库；

读取数据库中存储的告警数据，采用预设配置将所述告警数据发送至目标对象。

上述方法中，所述获取ELK平台所采集的应用日志数据之前，包括：

ELK平台实时采集应用在运行期间的应用日志数据，将所述采集的应用日志数据进行格式化，对所述应用日志数据的字段建立索引，当收到应用日志数据查询请求后，根据所述索引将与所述查询请求对应的应用日志数据进行发送。

上述方法中，所述获取ELK平台所采集的应用日志数据，包括：

周期性的向ELK平台发送应用日志数据查询请求，所述应用日志数据查询请求包括查询预设的多个连续的时间点的应用日志数据，获取ELK平台发送的预设的多个连续的时间点的应用日志数据。

其中，所述基于预设规则，判断所述应用日志数据文件中是否有需要告警的数据，将告警数据存入数据库中，包括：

预先对应用日志数据中各个类型的数据设定阈值，获取ELK平台发送的应用日志数据后，判断所述应用日志数据中各个类型数据在预设的连续的时间点是否超过所述预设的阈值，将超过阈值的数据确定为需要告警的告警数据，将所述告警数据存入数据库中。

所述阈值根据应用在正常运行中日志数据的取值设定。

所述预设配置包括调用通信工具接口以发送告警数据。

本发明实施例还提供了一种应用日志数据告警装置，包括：

获取模块，用于获取ELK平台所采集的应用日志数据；所述应用日志数据包括应用在运行期间内所有数据在各个时间点的数值；

确定模块，用于基于预设规则，判断所述应用日志数据文件中是否有需要告警的告警数据，确定出告警数据；

数据库，用于存储告警数据；

发送模块，读取所述存储在数据库中的告警数据，根据预设配置将所述告警数据发送至目标对象；所述预设配置包括调用通信工具接口以发送告警数据。

其中，所述获取模块，具体用于：

周期性的向ELK平台发送应用日志数据查询请求，所述应用日志数据查询请求包括查询预设的多个时间点的应用日志数据，获取ELK平台发送的预设的多个时间点的应用日志数据。

所述确定模块，具体用于：

预先对应用日志数据中各个类型的数据设定阈值，获取ELK平台发送的应用日志数据后，判断所述应用日志数据各个类型数据在预设的连续的时间点是否超过所述预设的阈值，将所述超过阈值的数据确定为需要告警的告警数据，将所述告警数据存入数据库中。

所述确定模块中预先对应用日志数据中各个类型的数据设定阈值根据应用在正常运行中日志数据的取值进行设定。