[发明专利]数据处理系统、数据处理方法以及装置

说明书

本说明书实施例提供数据处理系统、数据处理方法以及装置，其中，所述数据处理系统，包括磁盘集合、包括磁盘槽位的至少两个磁盘数据扩展装置、至少两个磁盘数据读取装置以及磁盘组，其中，每个磁盘数据扩展装置，被配置为从所述磁盘集合中获取磁盘，并将每个磁盘放置在每个磁盘数据扩展装置的磁盘槽位中；每个磁盘数据读取装置，被配置为分别与所述至少两个磁盘数据扩展装置连接，访问每个磁盘数据扩展装置的磁盘槽位中的磁盘；所述磁盘组，被配置为从每个磁盘数据扩展装置中获取预设数量的磁盘形成磁盘组，且存储通过纠删技术写入的数据。

技术领域

本说明书实施例涉及计算机技术领域，特别涉及一种数据处理方法。本说明书一个或者多个实施例同时涉及一种数据处理系统，一种数据处理装置，一种计算设备，以及一种计算机可读存储介质。

背景技术

目前在大规模分布式存储系统中，通常会有数百块用于集群存储的磁盘，这些磁盘通过分布式存储系统的策略构建存储数据的存储池，但是现有的磁盘在损坏或者宕机的情况下，磁盘中的数据也会丢失不可用，导致数据的安全性和可靠性较差。

发明内容

有鉴于此，本说明书施例提供了一种数据处理方法。本说明书一个或者多个实施例同时涉及一种数据处理系统，一种数据处理装置，一种计算设备，以及一种计算机可读存储介质，以解决现有技术中存在的技术缺陷。

根据本说明书实施例的第一方面，提供了一种数据处理系统，包括：

磁盘集合、包括磁盘槽位的至少两个磁盘数据扩展装置、至少两个磁盘数据读取装置以及磁盘组，其中，

每个磁盘数据扩展装置，被配置为从所述磁盘集合中获取磁盘，并将每个磁盘放置在每个磁盘数据扩展装置的磁盘槽位中；

每个磁盘数据读取装置，被配置为分别与所述至少两个磁盘数据扩展装置连接，访问每个磁盘数据扩展装置的磁盘槽位中的磁盘；

所述磁盘组，被配置为从每个磁盘数据扩展装置中获取预设数量的磁盘形成磁盘组，且存储通过纠删技术写入的数据。

根据本说明书实施例的第二方面，提供了一种数据处理方法，包括：

基于预设需求构建初始数据读写对象，并为所述初始数据读写对象设置对象标识；

基于预设选取规则从磁盘组中选取预设数量的磁盘，建立所述磁盘和所述初始数据读写对象的关联关系；

将所述磁盘的元数据和所述初始数据读写对象的对象标识，作为所述初始数据读写对象的元数据；

将所述初始数据读写对象的元数据，存储一致性检查点和日志文件的所述磁盘的前n个存储单元，实现目标数据读写对象的构建，且n为正整数。

根据本说明书实施例的第三方面，提供了一种数据处理装置，包括：

对象构建模块，被配置为基于预设需求构建初始数据读写对象，并为所述初始数据读写对象设置对象标识；

关系建立模块，被配置为基于预设选取规则从磁盘组中选取预设数量的磁盘，建立所述磁盘和所述初始数据读写对象的关联关系；

元数据确定模块，被配置为将所述磁盘的元数据和所述初始数据读写对象的对象标识，作为所述初始数据读写对象的元数据；

元数据存储模块，被配置为将所述初始数据读写对象的元数据，存储一致性检查点和日志文件的所述磁盘的前n个存储单元，实现目标数据读写对象的构建，且n为正整数。

根据本说明书实施例的第四方面，提供了一种计算设备，包括：

存储器和处理器；

所述存储器用于存储计算机可执行指令，所述处理器用于执行所述计算机可执行指令，该计算机可执行指令被处理器执行时实现上述数据处理方法的步骤。