[发明专利]日志数据处理方法、装置、设备及存储介质

说明书

本发明公开了一种日志数据处理方法、装置、设备及存储介质。该方法包括：获取微服务器在处理至少一个请求任务过程中产生的日志数据；其中，日志数据带有执行状态标识；通过预设的消息队列存储执行不同行为类别下的日志数据，从消息队列中获取日志数据作为待处理数据；采用与待处理数据的行为类别相应的调度线程，对待处理数据进行处理，得到待存储日志数据；根据待存储日志数据对应的执行状态标识，对待存储日志数据进行存储和/或重加载处理。本发明实施例实现了对日志数据的实时处理，提高了日志数据处理效率。

技术领域

本发明涉及数据处理技术领域，尤其涉及一种日志数据处理方法、装置、设备及存储介质。

背景技术

中台系统体系复杂、服务数量大，对细粒度的日志数据进行记录分析的体系尚未建立完善，并且对日志数据分析速度慢，如不能快速对数据进行运算，导致不能做到对每个业务的请求和响应进行实时计算。

发明内容

本发明提供了一种日志数据处理方法、装置、设备及存储介质，以实现对日志数据的实时处理，提高日志数据处理效率。

根据本发明的一方面，提供了一种日志数据处理方法，所述方法包括：

获取微服务器在处理至少一个请求任务过程中产生的日志数据；其中，所述日志数据带有执行状态标识；

通过预设的消息队列存储执行不同行为类别下的日志数据，从所述消息队列中获取所述日志数据作为待处理数据；

采用与所述待处理数据的行为类别相应的调度线程，对所述待处理数据进行处理，得到待存储日志数据；

根据所述待存储日志数据对应的执行状态标识，对所述待存储日志数据进行存储和/或重加载处理。

根据本发明的另一方面，提供了一种日志数据处理装置，该装置包括：

日志数据获取模块，用于获取微服务器在处理至少一个请求任务过程中产生的日志数据；其中，所述日志数据带有执行状态标识；

待处理数据获取模块，用于通过预设的消息队列存储执行不同行为类别下的日志数据，从所述消息队列中获取所述日志数据作为待处理数据；

待处理数据处理模块，用于采用与所述待处理数据的行为类别相应的调度线程，对所述待处理数据进行处理，得到待存储日志数据；

存储数据处理模块，用于根据所述待存储日志数据对应的执行状态标识，对所述待存储日志数据进行存储和/或重加载处理。

根据本发明的另一方面，提供了一种电子设备，所述电子设备包括：

至少一个处理器；以及

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的计算机程序，所述计算机程序被所述至少一个处理器执行，以使所述至少一个处理器能够执行本发明任一实施例所述的日志数据处理方法。

根据本发明的另一方面，提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使处理器执行时实现本发明任一实施例所述的日志数据处理方法。

本发明实施例通过采用与待处理数据的行为类别相应的调度线程，对待处理数据进行处理，得到待存储日志数据；根据待存储日志数据对应的执行状态标识，对待存储日志数据进行存储和/或重加载处理，实现了对日志数据的实时处理，提高了日志数据的处理效率。

应当理解，本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征，也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。

附图说明