[发明专利]一种数据存储系统中的管理副本的方法、装置和存储介质

说明书

技术领域

本发明实施例涉及计算机技术，尤其涉及一种数据存储系统中的管理副本的方法、装置和存储介质。

背景技术

为保证云存储数据管理的完整性，一般云存储系统中服务器节点上的数据都会保存多份，以确保存储了该数据的服务器节点出现故障时不会导致该数据的永久性遗失，但是副本冗余都是通过复制实现的，而复制也要付出很高的代价，副本数据的增加会占用大量系统中的存储空间资源，同时为了保证多个副本的一致性也会消耗大量的计算和网络资源。

发明内容

本发明实施例提供一种数据存储系统中的管理副本的方法、装置和存储介质，如何在提高系统的可靠性和可用性的同时，也尽可能减小副本冗余带来的各种资源的消耗，是副本管理研究的重要目标。

第一方面，本发明实施例提供了一种数据存储系统中的管理副本的方法，所述方法包括：

通过预设算法获取待存储文件Fa在Chord环中的位置La，并查找所述Fa存放的存储簇；

分块所述Fa，并获取存储分块后的文件Fa的存储位置；

存储数据块，并创建所述数据块的元数据。

可选地，所述查找所述Fa存放的存储簇，包括：

根据所述La在由存储簇的管理节点构成的Chord环上，顺时针找到第一个管理节点Mi，所述Mi为所述Fa存放在所述存储簇的管理节点。

可选地，所述分块所述Fa，包括：

将所述Fa顺序分割为每个为64MB固定大小的数据块Bi，并对数据块进行编号。

可选地，所述获取存储分块后的文件Fa的存储位置，包括：

接收向所述Mi发送的存储数据的请求，所述Mi根据所在存储簇中的数据块服务器节点的负载情况，返回存储所述Fa的数据块服务器节点的信息。

可选地，所述存储数据块，包括：

将分块文件B1～BN存入到对应的数据块服务器节点。

可选地，所述创建所述数据块的元数据，包括：

当存储所述Fa后，存储簇的管理节点Mi保存所述Fa的资源标识File ID、文件名称、文件大小、拥护者、数据块Bi与存储位置之间的映射以及所述Fa的版本号。

可选地，所述存储数据块，并创建所述数据块的元数据之后，还包括：

存储冗余副本；

根据副本放置策略，选择存储簇并存储所述冗余副本；

返回存储结果。

第二方面，一种数据存储系统中的管理副本的装置，所述装置包括：

查找模块，用于通过预设算法获取待存储文件Fa在Chord环中的位置La，并查找所述Fa存放的存储簇；

获取模块，用于分块所述Fa，并获取存储分块后的文件Fa的存储位置；

创建模块，用于存储数据块，并创建所述数据块的元数据。

可选地，所述查找模块，用于：

根据所述La在由存储簇的管理节点构成的Chord环上，顺时针找到第一个管理节点Mi，所述Mi为所述Fa存放在所述存储簇的管理节点；

所述获取模块，用于：

将所述Fa顺序分割为每个为64MB固定大小的数据块Bi，并对数据块进行编号；接收向所述Mi发送的存储数据的请求，所述Mi根据所在存储簇中的数据块服务器节点的负载情况，返回存储所述Fa的数据块服务器节点的信息；

所述创建模块，用于：

将分块文件B1～BN存入到对应的数据块服务器节点，当存储所述Fa后，存储簇的管理节点Mi保存所述Fa的资源标识File ID、文件名称、文件大小、拥护者、数据块Bi与存储位置之间的映射以及所述Fa的版本号；

所述存储数据块，并创建所述数据块的元数据之后，还包括：

存储冗余副本；

根据副本放置策略，选择存储簇并存储所述冗余副本；

返回存储结果。

第三方面，一种计算机可读存储介质，其特征在于，其上存储有计算机程序，该计算机程序被处理器执行时实现上述的数据存储系统中的管理副本的方法。

本发明实施例中，通过预设算法获取待存储文件Fa在Chord环中的位置La，并查找所述Fa存放的存储簇；分块所述Fa，并获取存储分块后的文件Fa的存储位置；存储数据块，并创建所述数据块的元数据；在所设计的基于存储簇对等的云存储模型中，通过将高频访问的元数据和路由信息集中到高性能的存储簇管理节点上，以实现更好的提高系统的访问性能。

附图说明

图1是本发明实施例一中的一种P2P的结构示意图；