[发明专利]数据处理方法、装置、系统及存储介质

说明书

本发明实施例公开了一种数据处理方法、装置、系统及存储介质，该数据处理方法包括：对各业务数据中的key值数据进行至少两次不同的空间映射转换，以得到各空间映射转换结果；通过融合各key值数据分别对应的各空间映射转换结果，得到各key值数据的空间坐标值；根据预设时长内各key值数据的空间坐标值出现次数的统计结果获取热点坐标集，其中，所述热点坐标集包括统计结果中次数大小靠前的预设数量个空间坐标值；确定空间坐标值属于所述热点坐标集的业务数据为热点数据。本发明实施例数据处理方法的热点数据识别的效率高，且节省了客户端的CPU消耗。

技术领域

本发明涉及数据缓存领域，具体涉及一种数据处理方法、装置、系统及存储介质。

背景技术

业务平台对缓存的依赖程度很高，主要业务内容对应的数据大多存储于缓存中，对缓存性能以及健壮性有极高的要求，需要能承载高并发访问压力，并且具备完善的容灾、备份、压力扩容体系。

在出现瞬时爆发式访问场景时，为满足对于数据的访问需求，现有的扩容方案是对缓存集群数据全量复制到新节点进行扩容。这样的全量复制扩容方案受限于对于业务数据的“无区分”，会导致处理资源的盲目耗费。

发明内容

有鉴于此，本发明实施例提供了一种数据处理方法、装置、系统及存储介质，用以解决现有技术由于对于业务数据“无区分”，会导致处理资源盲目耗费的问题。

本发明实施例的技术方案是这样实现的：

第一方面，本发明实施例提供一种数据处理方法，该数据处理方法包括：

对各业务数据中的key值数据进行至少两次不同的空间映射转换，以得到各空间映射转换结果；通过融合各key值数据分别对应的各空间映射转换结果，得到各key值数据的空间坐标值；

根据预设时长内各key值数据的空间坐标值出现次数的统计结果获取热点坐标集，其中，所述热点坐标集包括统计结果中次数大小靠前的预设数量个空间坐标值；

确定空间坐标值属于所述热点坐标集的业务数据为热点数据。

第二方面，本发明实施例提供一种数据处理装置，该数据处理装置包括：

转换模块，用于对各业务数据中的key值数据进行至少两次不同的空间映射转换，以得到各空间映射转换结果；通过融合各key值数据分别对应的各空间映射转换结果，得到各key值数据的空间坐标值；

获取模块，用于根据预设时长内各key值数据的空间坐标值出现次数的统计结果获取热点坐标集，其中，所述热点坐标集包括统计结果中次数大小靠前的预设数量个空间坐标值；

确定模块，用于确定空间坐标值属于所述热点坐标集的业务数据为热点数据。

第三方面，本发明实施例还提供一种数据处理系统，该数据处理系统包括：

客户端，用于对各业务数据中的key值数据进行至少两次不同的空间映射转换，以得到各空间映射转换结果；通过融合各key值数据分别对应的各空间映射转换结果，得到各key值数据的空间坐标值；根据预设时长内各key值数据的空间坐标值出现次数的统计结果获取热点坐标集，其中，所述热点坐标集包括统计结果中次数大小靠前的预设数量个空间坐标值；确定空间坐标值属于所述热点坐标集的业务数据为热点数据；

监控系统，用于以所述预设时长为间隔周期性发送所述热点坐标集给所述客户端。

第四方面，本发明实施例还提供一种计算机存储介质，存储有可执行程序，所述可执行程序被处理器执行时，实现上述任一实施例所述的数据处理方法。