[发明专利]一种文件处理方法、装置、设备及计算机可读存储介质

说明书

本申请公开了一种文件处理方法，包括：利用纠删码算法将文件编码生成多个数据块，将所述多个数据块存储于至少两个存储节点，所述存储节点至少包括分布式文件系统中的存储节点；其中，一个数据块只被存储一次；在区块链网络中存储所述文件的文件索引、所述多个数据块中每个数据块各自的存储地址以及所述文件相关的哈希值。如此，大幅降低了数据冗余度，实现以更小的数据冗余度获得更高数据可靠性，提高了存储空间利用率。并且，该方法采用了区块链网络与链外式分布存储系统联合存储的方式，降低了区块链网络的存储压力，通过引入分布式文件系统，扩展了存储容量。本申请还公开了一种文件处理装置、设备、介质以及计算机程序产品。

技术领域

本申请涉及区块链技术领域，尤其涉及一种文件处理方法、装置、设备及计算机可读存储介质。

背景技术

随着区块链技术近几年的快速发展，区块链网络几乎可以应用到任何领域，如在金融、物流、公共服务器、物联网等领域都已经有大量的应用案例。区块链在各个领域的应用中，都是基于其所具有的多方共识、交易溯源、以及不可篡改等技术特点，以用于实现数据存储。因此，区块链的本质也可以理解为是一种特殊的分布式数据库，其主要用于存储数据。

目前在各个领域中应用区块链网络实现数据存储时，随着业务量的快速增长，区块链网络所面临的数据存储压力也在快速增长，考虑到区块链网络中节点容量和性能的有限的情况，为了满足数据存储需求，通常会在区块链网络之外，再额外增加部署一套存储系统，称之为链外存储系统，其专门用于存储数据本身，而将数据本身在该存储系统中的地址信息以及数据本身的哈希值存在区块链网络中，以保证数据的可靠性。

由于数据本身存储在该链外存储系统中，该链外存储系统并没有防篡改功能，因此原始数据很容易被篡改或者删除，而一旦原始数据被篡改或者被删除，将会导致原始数据无法被恢复，数据的安全性存在很大隐患。目前为了提高数据的安全性，在该存储系统中通常采用多副本数据冗余技术增加区块链外存储的数据的安全性，这又额外增加了存储系统的存储压力，降低了存储系统的存储空间利用率。可见，现阶段亟需提供一种方案以同时解决存储文件时区块链网络存储容量有限和数据存储安全性不足的问题。

发明内容

本申请实施例提供了一种文件处理方法，该方法利用纠删码算法将文件编码生成包含原始数据块和校验块在内的多个数据块，将多个数据块存储于至少两个存储节点，以实现数据冗余，保证数据可靠性，并且将数据块采用区块链网络以及链外存储系统联合存储，降低区块链网络存储压力。基于此，本申请还提供了一种文件处理装置、设备、存储介质以及计算机程序产品。

有鉴于此，本申请第一方面提供了一种文件处理方法，所述方法包括：

利用纠删码算法将文件编码生成多个数据块，所述多个数据块包括文件的原始数据块以及校验块；

将所述多个数据块存储于至少两个存储节点，所述存储节点至少包括分布式文件系统中的存储节点；其中，一个数据块只被存储一次；以及，

在区块链网络中存储所述文件的文件索引、所述多个数据块中每个数据块各自的存储地址以及所述文件相关的哈希值。

本申请第二方面提供了一种文件处理装置，所述装置包括：

生成模块，用于利用纠删码算法将文件编码生成多个数据块，所述多个数据块包括文件的原始数据块以及校验块；

存储模块，用于将所述多个数据块存储于至少两个存储节点，所述存储节点至少包括分布式文件系统中的存储节点；其中，一个数据块只被存储一次；以及，

在区块链网络中存储所述文件的文件索引、所述多个数据块中每个数据块各自的存储地址以及所述文件相关的哈希值。

本申请第三方面提供了一种文件处理设备，所述设备包括处理器以及存储器：

所述存储器用于存储程序代码，并将所述程序代码传输给所述处理器；