[发明专利]基于IPFS的文件分片备份方法、装置、设备及存储介质

说明书

本申请涉及人工智能，本申请提供一种基于IPFS的文件分片备份方法、装置、设备及存储介质，所述方法包括将源文件编码，生成编码文件，将所述编码文件切割成N个文件分片，其中，N为大于或等于2的整数；从控制中心获取M个存储组织，所述M个存储组织分别对应M个存储节点，并将所述N个文件分片存储至所述存储节点，其中，M为大于或等于2的整数。本发明基于IPFS协议，在不使用加密的前提下，通过对文件分片存储备份的方式，解决了存储中心通过窥探存储文件来泄露用户隐私的问题，提高了文件的存储安全性和拉取效率。

技术领域

本发明涉及文件存储技术领域，尤其涉及一种基于IPFS的文件分片备份方法、装置、设备及计算机可读存储介质。

背景技术

随着数据信息的爆发式增长，存储技术也得到了飞速发展。其中，云存储技术搭载着云计算系统对数据进行存储和管理正在蓬勃发展。目前，传统的云存储技术都是中心化运营的，中心化存储是将用户数据完整的存储在中心化机构开发的服务器上，用户很难确保数据的效率、安全和业务连续性。而且深度学习的发展需要大量的训练数据，巨大的商业利益会驱使大公司窃取用户存储在个人云盘里面的数据来进行神经网络训练，从而导致了用户隐私的泄露；因此，在传统的中心化存储中，完全无法限制存储中心对文件内容的窥探。目前，若要保证文件内容安全，必须使用加密手段对文件进行加密，这样做一方面使文件占用的存储空间膨胀，另一方面必须对密钥进行管理，增加了复杂度，降低了数据使用效率。因此，在不使用加密的前提下，如何提高数据的安全性成为了目前亟待解决的技术问题。

发明内容

本发明的主要目的在于提供一种基于IPFS的文件分片备份方法、装置、设备及计算机可读存储介质，旨在解决现有基于IPFS的文件分片备份的技术问题。

为实现上述目的，本发明提供一种基于IPFS的文件分片备份方法，所述基于IPFS的文件分片备份方法包括：

将源文件编码，生成编码文件，将所述编码文件切割成N个文件分片，其中，N为大于或等于2的整数；

从控制中心获取M个存储组织，所述M个存储组织分别对应M个存储节点，其中，M为大于或等于2的整数；

将所述N个文件分片存储至所述存储节点中的结构树。

进一步地，所述将所述N个文件分片存储至所述存储节点之后，还包括：

基于所述存储节点所属存储组织之间的关联关系，生成所述存储节点对应的结构树，其中，所述结构树包括全部所述存储节点，以便基于所述结构树对所述存储节点进行查找。

进一步地，所述将源文件编码，生成编码文件，将所述编码文件切割成N个文件分片包括：

压缩所述源文件，生成所述编码文件，并获取所述编码文件的大小；

根据预设切片标准以及所述编码文件的大小，将所述编码文件进行切片，并生成所述N个文件分片。

进一步地，所述将所述N个文件分片存储至所述存储节点包括：

在M等于N时，将所述N个文件分片分别存储至所述M个存储节点；

在M大于N时，在所述M个存储节点中确定N个存储节点，并将所述N个文件分片分别存储至所述N个存储节点；

在M小于N时，将所述N个文件分片划分为M个文件分片，并将所述M个文件分片分别存储至所述M个存储节点。

进一步地，所述将所述N个文件分片存储至所述存储节点还包括：

基于N，确定目标值，并将所述N个文件分片按照所述目标值进行冗余备份，生成对应个数的文件块，其中，M大于等于3，N大于等于3；

将所述对应个数的文件块分别存储至所述存储节点。