[发明专利]一种数据压缩方法、装置、电子设备及存储介质

说明书

本申请公开了一种数据压缩方法、装置、电子设备及存储介质。该方法包括：获取来自于业务终端的原始业务数据，其中，所述业务终端是与所述云服务系统具有连接关系的终端；调用数据压缩插件对所述原始业务数据进行压缩，得到压缩后的目标业务数据；确定所述目标业务数据待写入的目标插件，其中，所述目标插件为部署在所述云服务系统中的插件；将所述目标业务数据写入所述目标插件。本申请实施例提供的压缩方法能够在数据存储前调用数据压缩插件对业务数据进行压缩，能够降低后端的业务压力，且保证后端的服务效率，以及数据的实时使用。

技术领域

本申请涉及数据处理领域，尤其涉及一种数据压缩方法、装置、电子设备及存储介质。

背景技术

随着Open stack集群规模越来越大，监控数据、业务数据呈现指数级增长，给后期计算、存储资源扩容带来了极大的考验。如何稳定、永久存储监控数据和业务数据，快速查询热数据与历史数据一直是大规模云计算集群存在的问题。

目前对业务数据的压缩处理均是在后端进行，依靠分布式、集中式的存储实现数据存储功能，然而面临业务数据的存储量增大时，后端会对存储的数据进行压缩，导致后端的服务效率降低，无法保证数据的实时使用。

发明内容

为了解决上述技术问题或者至少部分地解决上述技术问题，本申请提供了一种数据压缩方法、装置、电子设备及存储介质。

根据本申请实施例的一个方面，提供了一种数据压缩方法，应用于云服务系统，所述方法包括：

获取来自于业务终端的原始业务数据，其中，所述业务终端是所述云服务系统具有连接关系的终端；

调用数据压缩插件对所述原始业务数据进行压缩，得到压缩后的目标业务数据；

确定所述目标业务数据待写入的目标插件，其中，所述目标插件为部署在所述云服务系统中的插件；

将所述目标业务数据写入所述目标插件。

进一步的，在获取来自于业务终端的原始业务数据之前，所述方法还包括：

接收插件使用请求，其中，所述插件使用请求用于请求使用数据压缩插件；

解析所述插件使用请求，得到插件认证信息；

在确定所述插件认证信息认证通过的情况下，激活部署于所述云服务系统中的数据压缩插件。

进一步的，所述获取来自于业务终端的原始业务数据，包括：

获取作用于所述数据压缩插件的配置操作；

基于所述配置操作，将所述数据压缩插件对外提供的服务接口与所述业务终端对接，并基于所述服务接口获取来自于业务终端的原始业务数据。

进一步的，所述调用数据压缩插件对所述原始业务数据进行压缩，得到压缩后的目标业务数据，包括：

调用所述数据压缩插件解析所述原始业务数据，得到所述原始业务数据对应的数据类型；

根据所述数据类型对应的压缩操作对所述原始业务数据进行压缩，得到压缩后的目标业务数据。

进一步的，所述根据所述数据类型对应的压缩操作对所述原始业务数据进行压缩，得到压缩后的目标业务数据，包括：

在所述数据类型用于指示所述原始业务数据属于非实时使用类型的情况下，对所述原始业务数据进行切分，得到多个不同数据长度的原始子数据；

对多个不同长度的原始子数据进行压缩，得到多个相同数据长度的目标子数据；

基于所述目标子数据生成的压缩后的目标业务数据。

进一步的，所述方法还包括：