[发明专利]数据处理方法及装置、电子设备和计算机可读存储介质

说明书

本公开提供了一种数据处理方法及装置、电子设备和计算机可读存储介质，可以应用于运维领域和金融领域。该数据处理方法包括：响应于检测到应用程序列表中与第一应用程序相关的信息被更新，发送获取请求，其中，应用程序列表用于记录服务器上正在运行的至少一个应用程序的信息，获取请求用于获取与第一应用程序对应的第一采集工具；响应于接收到第一采集工具，利用第一采集工具，采集用于第一应用程序的第一目标数据，其中，第一目标数据包括和至少一个类型信息；以及根据至少一个类型信息，将第一目标数据发送至目标数据库，以便目标数据库分类存储第一目标数据。

技术领域

本公开涉及运维领域和金融领域，更具体地，涉及一种数据处理方法及装置、电子设备、计算机可读存储介质和一种计算机程序产品。

背景技术

随着业务系统的集中，业务系统中各个服务器上运行的应用程序也越来越多，不仅增加了运维的工作强度，而且会使集中的业务系统变得更加繁杂。

在运维监控领域，需要关注各个服务器上运行的应用程序，可以使用多种运维系统对这些应用程序运行情况进行监控。相关技术中通常部署多个采集客户端用于采集不同应用程序的数据，通过获取这些应用程序的日志、指标和配置等相关信息等来实现。

在实现本公开构思的过程中，发明人发现相关技术中至少存在如下问题：采集客户端通常需要由人工部署，并且当服务器上运行的应用程序发生改变时，需要由人工更新采集客户端，导致运维难度较大，运维成本较高；可能无法及时发现应用程序的变化，导致数据漏采或者重复采集；对于采集到的数据尚缺乏较好的处理方式。

发明内容

有鉴于此，本公开提供了一种数据处理方法及装置、电子设备、计算机可读存储介质和计算机程序产品。

根据本公开的第一个方面，提供了一种数据处理方法，包括：

响应于检测到应用程序列表中与第一应用程序相关的信息被更新，发送获取请求，其中，上述应用程序列表用于记录服务器上正在运行的至少一个应用程序的信息，上述获取请求用于获取与上述第一应用程序对应的第一采集工具；

响应于接收到上述第一采集工具，利用上述第一采集工具，采集用于上述第一应用程序的第一目标数据，其中，上述第一目标数据包括和至少一个类型信息；以及

根据上述至少一个类型信息，将上述第一目标数据发送至目标数据库，以便上述目标数据库分类存储上述第一目标数据。

根据本公开的实施例，其中，上述类型信息包括以下中的至少一个：日志数据、时序指标数据和拓扑关联数据；

其中，上述第一目标数据还包括标签信息，上述标签信息包括以下中的至少一个：上述服务器的标识信息、采集时间和上述第一采集工具的版本信息。

根据本公开的实施例，其中，上述根据上述至少一个类型信息，将上述第一目标数据发送至目标数据库，以便上述目标数据库分类存储上述第一目标数据，包括：

在上述第一目标数据包括上述日志数据的情况下，将上述日志原文数据和上述标识信息传输给日志数据库；

在上述第一目标数据包括上述时序指标数据的情况下，将上述时序指标数据和上述标识信息传输给时序指标数据库；

在上述第一目标数据包括上述拓扑关联数据的情况下，将上述拓扑关联数据和上述标识信息传输给拓扑关联数据库。

根据本公开的实施例，上述方法还包括，在上述响应于检测到应用程序列表中与第一应用程序相关的信息被更新，发送获取请求之前：

扫描上述服务器上正在运行的应用程序；

确定当前没有运行的第二应用程序的信息；

将上述第二应用程序在上述应用程序列表中删除；以及