[发明专利]一种基于对象存储服务的数据管理方法、装置及相关组件

说明书

本申请公开了一种基于对象存储服务的数据管理方法，首先将磁盘划分为哈希环上的多个存储对象，通过分布式哈希表机制实现了在内存中确定存储对象的信息，对存储对象进行相应的数据管理操作，去除了journal管理机制和元数据管理机制，相较于现有技术有更快的响应速度，同时，采用排队机制对接收到的数据管理请求进行预处理，以避免同一时间对同一个目标存储对象进行数据管理操作，提高了数据管理性能。本申请还公开了一种基于对象存储服务的数据管理装置、电子设备及一种可读存储介质。

技术领域

本申请涉及对象存储领域，特别是涉及一种基于对象存储服务的数据管理方法、装置及相关组件。

背景技术

目前分布式文件系统Ceph广泛应用于对象存储服务，对象存储服务主要是提供业务读、写管理和磁盘数据管理功能。Ceph的常用存储引擎Filestore自身存在journal机制，在日志等元数据存储时会有写放大问题，而且在对元数据进行管理时需要和底层磁盘设备进行频繁的数据交互，导致响应速度较慢。此外，在接收数据管理请求时，若读/写数据请求对应同一个磁盘，可能会由于写数据操作未完成，使得读数据请求得到的数据不准确，降低了数据管理性能。

因此，如何提供一种解决上述技术问题的方案是本领域技术人员目前需要解决的问题。

发明内容

本申请的目的是提供一种基于对象存储服务的数据管理方法、装置、电子设备及一种可读存储介质，相较于现有技术有更快的响应速度，同时还可以避免同一时间对同一个目标存储对象进行数据管理操作，提高了数据管理性能。

为解决上述技术问题，本申请提供了一种基于对象存储服务的数据管理方法，包括：

根据预设规则将磁盘划分为哈希环上的多个存储对象，计算多个所述存储对象的哈希值；

将接收到的数据管理请求放入接收队列，所述数据管理请求包含目标存储对象信息；

判断所述接收队列中是否存在待处理的数据管理请求，所述待处理的数据管理请求中包含的目标存储对象信息与处理队列中的数据管理请求中包含的目标存储对象信息不同；

若是，将所述待处理的数据管理请求放入所述管理队列；

计算所述管理队列中每一所述数据管理请求中目标存储对象信息的目标哈希值，通过所述目标哈希值在所述哈希环上确定与该数据管理请求对应的目标存储对象，对所述目标存储对象执行与该数据管理请求对应的数据管理操作。

优选的，所述根据预设规则将磁盘划分为哈希环上的多个存储对象的过程具体包括：

对每一所述磁盘按Lable区、Allocator区、Journal区及Data区进行数据格式化；

按预设规则将所述Data区划分为哈希环上的多个存储对象；

其中：

所述Lable区用于记录所述磁盘的标识信息；

所述Allocator区用于记录所述Data区的存储对象的使用情况，所述使用情况包括使用或未使用；

所述Journal区在接收到存储指令时，存储所述存储对象中的数据。

优选的，所述根据预设规则将磁盘划分为哈希环上的多个存储对象的过程具体为：

根据文件对象的大小将将磁盘划分为哈希环上的多个存储对象。

优选的，当所述数据管理请求为写数据请求时，所述对所述目标存储对象执行与该数据管理请求对应的数据管理操作的过程具体为：

通过Allocator区获取所述写数据请求对应的目标存储对象的使用情况；