[发明专利]数据采集方法、装置、设备及存储介质

说明书

本发明实施例公开了一种数据采集方法、装置、设备及存储介质。该方法包括：在进程运行过程中，如果接收到超文本传输协议HTTP服务请求，则确定与所述HTTP服务请求对应的待采集数据类型；如果本地缓存中存在与所述待采集数据类型匹配的有效数据，则将所述有效数据作为目标数据返回；如果本地缓存中不存在与所述待采集数据类型匹配的有效数据，则触发与所述待采集数据类型匹配的数据采集开关进行数据采集，并将采集的数据作为目标数据返回。本发明实施例的技术方案，实现了按需启动数据采集操作，减小额外的性能开销。

技术领域

本发明实施例涉及计算机技术领域，尤其涉及一种数据采集方法、装置、设备及存储介质。

背景技术

目前，应用进程运行时会进行进程内部调度和线程切换管理，运行过程中会将一些重要的统计数据记录下来，便于开发人员调试和分析，比如垃圾回收(GarbageCollection，GC)的时间，堆栈分配的内存等等。大多数编程语言都会提供一个运行时统计数据的采集函数，调用该函数将返回当前时刻的运行时状态，但是该函数的调用会有一定的性能开销，对于高并发要求的程序会有影响。

现有技术中，大多数的统计数据采集方案都是在进程启动时就将状态采集操作开启，性能开销较大。并且大多不会对采集的数据进行可视化，开发人员只能登陆服务器逐个去执行命令查看数据，很难有一个直观的效果观察数据的变化趋势。

发明内容

本发明实施例提供一种数据采集方法、装置、设备及存储介质，以实现按需启动数据采集操作，减小额外的性能开销。

第一方面，本发明实施例提供了一种数据采集方法，包括：

在进程运行过程中，如果接收到超文本传输协议(HyperText TransferProtocol，HTTP)服务请求，则确定与HTTP服务请求对应的待采集数据类型；

如果本地缓存中存在与待采集数据类型匹配的有效数据，则将有效数据作为目标数据返回；

如果本地缓存中不存在与待采集数据类型匹配的有效数据，则触发与待采集数据类型匹配的数据采集开关进行数据采集，并将采集的数据作为目标数据返回。

可选的，还包括：

预先针对各种待采集数据类型分别设置独立的数据采集开关以及HTTP接口；

其中，数据采集开关用于控制开启和关闭与待采集数据类型对应的数据采集操作，HTTP接口用于返回数据。

可选的，数据采集开关仅在接收到对应的HTTP服务请求时才被触发开启数据采集操作，在通过HTTP接口返回数据后被触发关闭数据采集操作。

可选的，预先针对各种待采集数据类型分别设置独立的数据采集开关以及HTTP接口，包括：

获取各待采集数据类型对应的数据采集函数，并为各数据采集函数分别设置对应的数据采集开关以及HTTP接口。

可选的，预先针对各种待采集数据类型分别设置采集周期参数；

如果本地缓存中存在与待采集数据类型匹配的有效数据，则将有效数据作为目标数据返回，包括：

如果在本地缓存中查询到与待采集数据类型匹配的目标缓存数据，并且目标缓存数据的采集时间与当前时间的差值不超过与待采集数据类型匹配的采集周期，则将目标缓存数据为目标数据返回。

可选的，如果本地缓存中不存在与待采集数据类型匹配的有效数据，则触发与待采集数据类型匹配的数据采集开关进行数据采集，包括：

如果在本地缓存中未查询到与待采集数据类型匹配的目标缓存数据，或者，从本地缓存中获取到的目标缓存数据的采集时间与当前时间的差值超过与待采集数据类型匹配的采集周期，则触发与待采集数据类型匹配的数据采集开关进行数据采集，并将采集的数据更新到本地缓存中。