[发明专利]分布式文件系统的元数据管理方法有效
| 申请号: | 201110454262.1 | 申请日: | 2011-12-30 |
| 公开(公告)号: | CN102411637A | 公开(公告)日: | 2012-04-11 |
| 发明(设计)人: | 沈国文;吴棣章 | 申请(专利权)人: | 创新科软件技术(深圳)有限公司;创新科存储技术有限公司 |
| 主分类号: | G06F17/30 | 分类号: | G06F17/30 |
| 代理公司: | 北京德琦知识产权代理有限公司 11018 | 代理人: | 王一斌;王琦 |
| 地址: | 518057 广东省深圳市南山区*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 分布式 文件系统 数据管理 方法 | ||
1.一种分布式文件系统的元数据管理方法,其特征在于,该方法包括以下步骤:
a、分布式文件系统预先建立M个元数据集合,根据预设的第一哈希函数,采用哈希散列的方式将所述元数据集合分散设置在元数据服务集群中的各元数据服务器中。所述元数据服务器各自保存一份全局集合映射表,所述全局集合映射表用于记录本服务器中设置的各元数据集合与其包含的元数据的映射关系以及所有未设置在本服务器中的各元数据集合与其所属元数据服务器的映射关系;
b、当客户端向元数据服务集群中的一个元数据服务器S_1请求保存文件时,所述元数据服务器S_1为所述文件分配一个全局索引号,并根据该全局索引号,采用哈希散列的方式,确定所述文件的元数据所属的元数据集合W,以及该元数据存放在所述元数据集合W中的索引节点位置D,所述元数据服务器S_1根据自身保存的全局集合映射表确定所述元数据集合W所在的元数据服务器S_i,触发所述元数据服务器S_i将所述文件的元数据保存在所述元数据服务器S_i中。
2.根据权利要求1所述的方法,其特征在于,步骤b中所述确定所述文件的元数据所属的元数据集合W,以及该元数据存放在所述元数据集合W中的索引节点位置D为:
将所述全局索引号划分成高H位和低L位两部分,其中,L+H=Z,所述Z为预设的所述全局索引号的二进制位数;
对于所述全局索引号的高H位,通过预设的第二哈希函数进行哈希计算,利用所得到的哈希值查找所述全局集合映射表,得到所述元数据集合W的位置信息;根据所述元数据集合W的位置信息,查到所述元数据集合W;
对于所述全局索引号的低L位,通过预设的第三哈希函数进行哈希计算,将所得到哈希值作为所述索引节点位置D。
3.根据权利要求1所述的方法,其特征在于,步骤b中将所述文件的元数据保存在所述元数据服务器S_i中包括:
元数据服务器S_i在索引节点位置D上分配索引节点,并将所述文件的元数据保存在本服务器中的所述索引节点位置D的索引节点中;
元数据服务器S_i在自身保存的所述全局集合映射表中记录所述元数据的全局索引号与所述元数据集合W的位置的映射关系;
元数据服务器S_i在自身保存的该元数据集合W的元数据映射表中记录所述元数据的全局索引号与所述元数据的索引节点的映射关系。
4.根据权利要求1所述的方法,其特征在于,所述步骤a中进一步包括:
所述分布式文件系统为所述M个元数据集合分别建立副本集合,并按照负载均衡的原则,将所述M个元数据集合的副本集合设置在所述元数据服务集群中的各元数据服务器中,并确保所述元数据集合与其副本集合所在元数据服务器不相同,所述各元数据服务器中分别保存一集合原副本映射表,所述集合原副本映射表用于保存设置在本服务器中的各元数据集合和其副本集合所在元数据服务器的映射关系以及设置在本服务器中的各副本集合与其对应的各元数据集合原本所在元数据服务器的映射关系。
5.根据权利要求4所述的方法,其特征在于,所述步骤b中进一步包括:
所述元数据服务器S_i根据自身保存的集合原副本映射表,确定所述元数据集合W的副本集合所在的元数据服务器W_copy,触发所述元数据服务器W_copy在所述元数据集合W的副本集合中保存所述文件的元数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于创新科软件技术(深圳)有限公司;创新科存储技术有限公司,未经创新科软件技术(深圳)有限公司;创新科存储技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201110454262.1/1.html,转载请声明来源钻瓜专利网。





