[发明专利]一种数据文件存储方法、装置、设备及存储介质

说明书

本发明实施例公开了一种数据文件存储方法、装置、设备及存储介质。该方法包括：划分数据文件，得到数据文件区块，如果各正常可用容灾域中的可用副本空间数满足第一预设条件并且各正常可用容灾域中的可用副本空间数与各故障可用容灾域的可用副本空间数的和满足第二预设条件，确定各所述故障可用容灾域以及各所述正常可用容灾域的目标副本空间数，将所述数据文件区块的文件副本分别存储到各目标副本空间数对应的容灾域中。与现有技术相比，本发明实施例在正常可用容灾域的基础上，充分利用了故障可用容灾域中的可用副本空间，弥补了正常可用容灾域中可用副本空间数不足的缺陷，既实现了数据文件的存储，又提高了副本空间的利用率。

技术领域

本发明实施例涉及数据处理技术领域，尤其涉及一种数据文件存储方法、装置、设备及存储介质。

背景技术

分布式文件系统是指文件系统管理的物理存储资源不一定直接连接在本地节点上，而是通过计算机网络与节点相连，节点可简单的理解为一台计算机。分布式文件系统可以将固定于某个地点的某个文件系统，扩展到任意多个地点/多个文件系统，众多的节点组成一个文件系统网络。每个节点可以分布在不同的地点，通过网络进行节点间的通信和数据传输，有效地解决了数据的存储和管理难题。

存储节点用于提供数据存储服务，存储数据文件。容灾域是一组存储节点的逻辑组合。分布式文件系统中通常采用多副本的方式来提高数据的可靠性，即把数据文件按照固定的区块大小划分为多个区块，每个区块以多副本的方式存储在不同的容灾域中。对于同一个区块来说，该区块对应的各副本中的数据相同。

现有的存储方式仅考虑正常可用容灾域，即当正常可用容灾域中存储节点上的可用副本空间数小于该数据文件对应的副本数时，认为该数据文件无法存储。正常可用容灾域为包含正常存储节点，且正常存储节点上存在可用副本空间的容灾域，可用副本空间为可以存储副本的存储区域。这种存储方式具有一定的局限性，降低了副本空间的利用率，也影响了数据文件的存储。

发明内容

本发明实施例提供一种数据文件存储方法、装置、设备及存储介质，以解决现有技术中因正常可用容灾域中可用副本空间数不足而无法存储数据文件的问题。

第一方面，本发明实施例提供了一种数据文件存储方法，包括：

划分数据文件，得到数据文件区块，所述数据文件包括文件副本；

如果各正常可用容灾域中的可用副本空间数满足第一预设条件并且各正常可用容灾域中的可用副本空间数与各故障可用容灾域的可用副本空间数的和满足第二预设条件，确定各所述故障可用容灾域以及各所述正常可用容灾域的目标副本空间数；

将所述数据文件区块的文件副本分别存储到各目标副本空间数对应的容灾域中。

第二方面，本发明实施例还提供了一种数据文件存储装置，该装置包括：

划分模块，用于划分数据文件，得到数据文件区块，所述数据文件包括文件副本；

目标副本空间数确定模块，用于如果各正常可用容灾域中的可用副本空间数满足第一预设条件并且各正常可用容灾域中的可用副本空间数与各故障可用容灾域的可用副本空间数的和满足第二预设条件，确定各所述故障可用容灾域以及各所述正常可用容灾域的目标副本空间数；

存储模块，用于将所述数据文件区块的文件副本分别存储到各目标副本空间数对应的容灾域中。

第三方面，本发明实施例还提供了一种设备，包括：

一个或多个处理器；

存储器，用于存储一个或多个程序；

当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现如第一方面所述的数据文件存储方法。