[发明专利]分布式文件系统中小文件的修复方法和装置有效
| 申请号: | 201510897346.0 | 申请日: | 2015-12-08 |
| 公开(公告)号: | CN105573861B | 公开(公告)日: | 2019-01-25 |
| 发明(设计)人: | 康撼宇;郭照斌;姜国梁;季旻;苗艳超;杨鹏 | 申请(专利权)人: | 曙光信息产业股份有限公司 |
| 主分类号: | G06F11/14 | 分类号: | G06F11/14;G06F16/182 |
| 代理公司: | 北京新知远方知识产权代理事务所(普通合伙) 11397 | 代理人: | 艾凤英 |
| 地址: | 300384 天津市西青区华*** | 国省代码: | 天津;12 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 分布式 文件系统 中小 文件 修复 方法 装置 | ||
1.一种分布式文件系统中小文件的修复方法,其特征在于,包括:
确定出现故障的第一逻辑盘,所述第一逻辑盘中包含待修复的第一小文件;
确定包含所述第一逻辑盘的第一逻辑盘组,所述第一逻辑盘组包含的逻辑盘中存储与所述第一小文件相关的第二小文件;
批量读取所述第一逻辑盘组上所有第二小文件;
根据所述第二小文件修复所述第一小文件;
所述确定出现故障的第一逻辑盘之前,还包括:
将磁盘切分为至少一个第二逻辑盘;
将存储第三小文件的第二逻辑盘组成第二逻辑盘组;
所述第二逻辑盘组中存储的第三小文件互为相关。
2.根据权利要求1所述的方法,其特征在于,所述第二小文件为所述第一小文件和所述第一小文件的备份小文件,或所述第一小文件和与所述第一小文件为同一文件的部分数据形成的小文件,或所述第一小文件、所述第一小文件的备份小文件和与所述第一小文件为同一文件的部分数据形成的小文件。
3.根据权利要求2所述的方法,其特征在于,所述第二逻辑盘组中存储的第三小文件互为相关,包括:所述第二逻辑盘组中存储的所有第三小文件互为备份,或所述第二逻辑盘组中存储的所有第三小文件为同一文件的部分数据形成的小文件,或所述第二逻辑盘组中存储的第三小文件中一部分互为备份,另一部分为同一文件的部分数据形成的小文件。
4.根据权利要求2所述的方法,其特征在于,若组成第二逻辑盘组的第二逻辑盘为多个,则组成所述第二逻辑盘组的第二逻辑盘位于不同节点上。
5.根据权利要求4所述的方法,其特征在于,节点出现故障,所述确定出现故障的第一逻辑盘,包括:
确定出现故障的节点上的各磁盘;
确定各磁盘切分出的第三逻辑盘;
将所有第三逻辑盘均作为第一逻辑磁盘。
6.根据权利要求4所述的方法,其特征在于,磁盘出现故障,所述确定出现故障的第一逻辑盘,包括:
确定出现故障的磁盘切分出的第四逻辑盘;
将所有第四逻辑盘均作为第一逻辑磁盘。
7.根据权利要求1所述的方法,其特征在于,所述根据所述第二小文件修复所述第一小文件之后,还包括:
将修复后的第一小文件写入第五逻辑盘,所述第五逻辑盘与所述第一逻辑盘的盘号相同,所述第五逻辑盘的物理位置与所述第一逻辑盘的物理位置不同;
将所述第一逻辑盘映射至所述第五逻辑盘。
8.一种分布式文件系统中小文件的修复装置,其特征在于,包括:
第一确定模块,用于确定出现故障的第一逻辑盘,所述第一逻辑盘中包含待修复的第一小文件;
第二确定模块,用于确定包含所述第一确定模块确定的第一逻辑盘的第一逻辑盘组,所述第一逻辑盘组包含的逻辑盘中存储与所述第一小文件相关的第二小文件;
读取模块,用于批量读取所述第二确定模块确定的第一逻辑盘组上所有第二小文件;
修复模块,用于根据所述读取模块读取的第二小文件修复所述第一小文件;
所述装置,还包括:
切分模块,用于将磁盘切分为至少一个第二逻辑盘;
组合模块,用于将存储第三小文件的第二逻辑盘组成第二逻辑盘组;
所述第二逻辑盘组中存储的第三小文件互为相关。
9.根据权利要求8所述的装置,其特征在于,所述第二小文件为所述第一小文件和所述第一小文件的备份小文件,或所述第一小文件和与所述第一小文件为同一文件的部分数据形成的小文件,或所述第一小文件、所述第一小文件的备份小文件和与所述第一小文件为同一文件的部分数据形成的小文件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于曙光信息产业股份有限公司,未经曙光信息产业股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510897346.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种测试资源动态申请的方法和装置
- 下一篇:数据处理方法及装置





