[发明专利]一种数据保护存储方法、装置及设备在审
| 申请号: | 202110863883.9 | 申请日: | 2021-07-29 |
| 公开(公告)号: | CN113590042A | 公开(公告)日: | 2021-11-02 |
| 发明(设计)人: | 柯丹丹;沈泽宇;高志远 | 申请(专利权)人: | 杭州宏杉科技股份有限公司 |
| 主分类号: | G06F3/06 | 分类号: | G06F3/06 |
| 代理公司: | 北京博思佳知识产权代理有限公司 11415 | 代理人: | 杨春香 |
| 地址: | 310053 浙江省杭州市滨江*** | 国省代码: | 浙江;33 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 数据 保护 存储 方法 装置 设备 | ||
1.一种数据保护存储方法,其特征在于,所述方法包括:
依据已设定的对待存储数据进行划分的数据块数量N和校验块数据M,确定用于存储待存储数据的存储节点的数量K和定位节点PN的数量P;其中,所述K大于或等于第一设定值,所述第一设定值为N与M的比值向上取整后与1之和,N大于或等于M,每一存储节点包含的存储介质数量大于或等于M;
按照均匀分布存储数据的原则建立映射表,所述映射表包括P个定位节点PN与K个存储节点上的存储介质之间的映射关系;
将第一待存储数据划分成N块数据块,并依据所述N块数据块计算出对应的M块校验块;
依据第一待存储数据对应的桶名和对象名确定出与所述桶名和对象名对应的目标PN;
依据所述目标PN在映射表中与存储介质的映射关系,将所述N块数据块和所述M块校验块存储至所述目标PN对应的存储介质。
2.根据权利要求1所述的方法,其特征在于,所述P靠近2的幂次方且为第二设定值的整数倍,所述第二设定值为N和M之和;所述按照均匀分布存储数据的原则建立映射表,包括:
按照第一预设方式将P个PN映射在每一存储节点包含的各存储介质中,其中,所述第一预设方式为:将所述第二设定值个PN构成一组定位条带组PSG,在所述PSG中相邻PN序号的差值为所述P与所述第二设定值的比值,且每一PSG包含所述第二设定值个定位条带PS,PS是所述第二设定值个PN进行排序的序列,各PS为首的PN均不同,同一组PSG中的PN分布在不同存储节点中或同一个存储节点的不同存储介质中。
3.根据权利要求2所述的方法,其特征在于,所述依据第一待存储数据对应的桶名和对象名确定出与所述桶名和对象名对应的目标PN,包括:
对第一待存储数据对应的桶名和对象名进行运算处理,并获得序号为运算处理结果的待存储PN;
查找首位为所述待存储PN的目标PS,并将所述目标PS中包含的各PN确定为用于存储所述第一待存储数据的各数据块和各校验块对应的目标PN;
所述依据所述目标PN在映射表中与存储介质的映射关系,将所述N块数据块和所述M块校验块存储至所述目标PN对应的存储介质,包括:
按照PN在所述目标PS排序的先后顺序,将所述N块数据块和所述M块校验块依次存储在所述PS包含的各PN对应的存储介质中。
4.根据权利要求3所述的方法,其特征在于,所述对第一待存储数据对应的桶名和对象名进行运算处理,并获得序号为运算处理结果的待存储PN,包括:
对第一待存储数据对应的桶名和对象名进行哈希计算并处理,得到哈希结果;
将所述哈希结果除以P并取余,并将取余结果确定为用于存储数据块的待存储PN的序号。
5.根据权利要求2所述的方法,其特征在于,该方法进一步包括:
获取待读取数据对应的桶名和对象名;
对所述待读取数据对应的桶名和对象名进行运算处理,并获得序号为运算处理结果的待读取PN;
查找首位为所述待读取PN的目标PS;
从所述存储节点中获取所述目标PS中各PN对应存储介质中存储的各数据块。
6.根据权利要求5所述的方法,其特征在于,所述对所述待读取数据对应的桶名和对象名进行运算处理,并获得序号为运算处理结果的待读取PN,包括:
对所述待读取数据对应的桶名和对象名进行哈希计算并处理,得到哈希结果;
将所述哈希结果除以P并取余,并将取余结果确定为运算结果。
7.根据权利要求6所述的方法,其特征在于,在所述从所述存储节点中获取所述目标PS中各PN对应存储介质中存储的各数据块之后,包括:
检测获取的各数据块的数量是否等于N,若不等于,则从所述存储节点中获取所述目标PS中各PN对应存储介质中存储的校验块,并利用所述校验块,将已获取的各数据块还原成N块数据块。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州宏杉科技股份有限公司,未经杭州宏杉科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110863883.9/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





