[发明专利]基于纠删码的分布式文件系统存储方法及装置在审
申请号: | 201710046771.8 | 申请日: | 2017-01-20 |
公开(公告)号: | CN106909470A | 公开(公告)日: | 2017-06-30 |
发明(设计)人: | 张勤 | 申请(专利权)人: | 深圳市中博科创信息技术有限公司 |
主分类号: | G06F11/10 | 分类号: | G06F11/10;G06F11/14;G06F17/30 |
代理公司: | 深圳市世纪恒程知识产权代理事务所44287 | 代理人: | 胡海国 |
地址: | 518000 广东省深圳市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 纠删码 分布式 文件系统 存储 方法 装置 | ||
1.一种基于纠删码的分布式文件系统存储方法,其特征在于,所述基于纠删码的分布式文件系统存储方法包括:
获取客户端写入的待存储数据,并通过纠删码编码方式得到所述待存储数据对应的校验数据;
对所述待存储数据和所述校验数据进行分片处理,得到K份的所述待存储数据和M份的所述校验数据;其中,K和M为正整数;
存储K份所述待存储数据和M份所述校验数据。
2.根据权利要求1所述的基于纠删码的分布式文件系统存储方法,其特征在于,所述对所述待存储数据和所述校验数据进行分片处理之前还包括:
根据存储空间设置适当的纠删码比例,即K:M。
3.根据权利要求1所述的基于纠删码的分布式文件系统存储方法,其特征在于,所述对所述待存储数据和所述校验数据进行分片处理包括:
判断所述待存储数据的长度是否为分片长度的K倍;
若否,则在所述待存储数据的末端添加数据以使所述待存储数据的长度达到分片长度的K倍。
4.根据权利要求1所述的基于纠删码的分布式文件系统存储方法,其特征在于,所述存储K份所述待存储数据和M份所述校验数据包括:
判断所述客户端请求的存储地址是否为缓存层;
若是,则将所述K份所述待存储数据和M份所述校验数据存入所述缓存层;
若否,则将所述K份所述待存储数据和M份所述校验数据存入存储层。
5.根据权利要求1-4中任一项所述的基于纠删码的分布式文件系统存储方法,其特征在于,K份所述待存储数据和M份所述校验数据中均包括用于查找自身数据的检索信息。
6.一种基于纠删码的分布式文件系统存储装置,其特征在于,所述基于纠删码的分布式文件系统存储装置包括:
获取模块,用于获取客户端写入的待存储数据,并通过纠删码编码方式得到所述待存储数据对应的校验数据;
分片模块,用于对所述待存储数据和所述校验数据进行分片处理,得到K份的所述待存储数据和M份的所述校验数据;其中,K和M为正整数;
存储模块,用于存储K份所述待存储数据和M份所述校验数据。
7.根据权利要求6所述的基于纠删码的分布式文件系统存储装置,其特征在于,所述基于纠删码的分布式文件系统存储装置还包括:
设置模块,用于根据存储空间设置适当的纠删码比例,即K:M。
8.根据权利要求6所述的基于纠删码的分布式文件系统存储装置,其特征在于,所述分片模块包括:
第一判断单元,用于判断所述待存储数据的长度是否为分片长度的K倍;
添加单元,用于在所述待存储数据的长度不足分片长度的整数倍时,在所述待存储数据的末端添加数据以使所述待存储数据的长度达到分片长度的K倍。
9.根据权利要求6所述的基于纠删码的分布式文件系统存储装置,其特征在于,所述存储模块包括:
第二判断单元,用于判断所述客户端请求的存储地址是否为缓存层;
第一存储单元,用于在所述客户端请求的存储地址是缓存层时,将所述K份所述待存储数据和M份所述校验数据存入所述缓存层;
第二存储单元,用于在所述客户端请求的存储地址不是缓存层时,将所述K份所述待存储数据和M份所述校验数据存入存储层。
10.根据权利要求6-9中任一项所述的基于纠删码的分布式文件系统存储装置,其特征在于,K份所述待存储数据和M份所述校验数据中均包括用于查找自身数据的检索信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市中博科创信息技术有限公司,未经深圳市中博科创信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710046771.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种双风扇茶叶用风干装置
- 下一篇:存取快闪存储器的方法与快闪存储器控制器