[发明专利]一种文件处理方法、装置、设备及计算机可读存储介质有效
申请号: | 201811349505.3 | 申请日: | 2018-11-13 |
公开(公告)号: | CN109491968B | 公开(公告)日: | 2021-01-22 |
发明(设计)人: | 胡慧潘;任珊;刘景春;王智慧 | 申请(专利权)人: | 恒生电子股份有限公司 |
主分类号: | G06F16/13 | 分类号: | G06F16/13;G06F16/182;G06F11/10 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 王宝筠 |
地址: | 310053 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 文件 处理 方法 装置 设备 计算机 可读 存储 介质 | ||
1.一种文件处理方法,其特征在于,应用于客户端,包括:
利用纠删码算法将文件编码生成多个数据块,所述多个数据块包括文件的原始数据块以及校验块;
将所述多个数据块存储于至少两个存储节点,所述存储节点至少包括分布式文件系统中的存储节点;其中,一个数据块只被存储一次;以及,
在区块链网络中存储所述文件的文件索引、所述多个数据块中每个数据块各自的存储地址以及所述文件相关的哈希值;
所述利用纠删码算法将文件编码生成多个数据块,包括:
利用纠删码算法将文件编码生成N个数据块,所述N为所述区块链网络的节点个数,所述N为大于等于2的正整数;其中,所述N个数据块中包括N1个原始数据块和N2个校验块,其中,N1与N2的和值为N,且N2是所述区块链网络所采用的共识算法的容错系数和所述区块链网络的节点个数的乘积。
2.根据权利要求1所述的方法,其特征在于,所述将所述多个数据块存储于至少两个存储节点,包括:
将所述多个数据块全部存储于所述分布式文件系统中的至少两个存储节点。
3.根据权利要求1所述的方法,其特征在于,所述将所述多个数据块存储于至少两个存储节点,包括:
将所述多个数据块中的至少一个数据块存储于所述区块链网络中的存储节点中,并且,将所述多个数据块中除去所述至少一个数据块之外的其余数据块存储于所述分布式文件系统中的存储节点中。
4.根据权利要求3所述的方法,其特征在于,所述校验块包括:全局校验块和局部校验块;
则所述将所述多个数据块中的至少一个数据块存储于所述区块链网络中的存储节点中,包括:
至少将所述多个数据块中的所述全局校验块存储于所述区块链网络中的存储节点中。
5.根据权利要求1所述的方法,其特征在于,所述分布式文件系统基于内容的地址存储数据块,所述内容的地址是基于数据块内容确定的哈希值;
则在区块链网络中存储所述文件的文件索引、所述多个数据块中每个数据块各自的存储地址以及所述文件相关的哈希值,包括:
在区块链网络中存储所述文件的文件索引以及与所述文件索引对应的所述多个数据块中每个数据块各自的哈希值。
6.根据权利要求1所述的方法,其特征在于,所述在区块链网络中存储所述文件的文件索引、所述多个数据块中每个数据块各自的存储地址以及所述文件相关的哈希值,包括:
在区块链网络中存储所述文件的文件索引、所述多个数据块中每个数据块各自的域名存储地址以及所述多个数据块中每个数据块各自的哈希值;或者,
在区块链网络中存储所述文件的文件索引、所述多个数据块中每个数据块各自的域名存储地址以及所述文件的哈希值。
7.根据权利要求5或6所述的方法,其特征在于,所述在区块链网络中存储所述多个数据块中每个数据块各自的哈希值,包括:
采用梅克尔树结构在区块链网络中存储所述多个数据块中每个数据块各自的哈希值。
8.根据权利要求1所述的方法,其特征在于,所述方法还包括:
根据所述区块链网络中存储的所述文件相关的哈希值,校验所述文件对应的所述多个数据块是否发生变化;
若检验出所述多个数据块中的某个数据块发生变化,则从所述存储节点中获取所述文件对应的未发生变化的数据块,并利用所述纠删码算法和所述未发生变化的数据块,解码得到所述某个数据块的原始数据并重新进行存储。
9.根据权利要求1所述的方法,其特征在于,所述将所述多个数据块存储于至少两个存储节点,包括:
根据所述多个数据块中每个数据块的哈希值和存储节点身份标识,确定每个数据块与节点之间的距离;
将每个数据块存储在与其距离最近的存储节点中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于恒生电子股份有限公司,未经恒生电子股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811349505.3/1.html,转载请声明来源钻瓜专利网。