[发明专利]一种基于多对等NameNode分布式文件系统及写入方法在审
| 申请号: | 201810305535.8 | 申请日: | 2018-04-08 |
| 公开(公告)号: | CN108737156A | 公开(公告)日: | 2018-11-02 |
| 发明(设计)人: | 李绍良;黄衍博;黄春豪;陈艳云 | 申请(专利权)人: | 广东睿江云计算股份有限公司 |
| 主分类号: | H04L12/24 | 分类号: | H04L12/24;H04L29/08;G06F17/30 |
| 代理公司: | 佛山市禾才知识产权代理有限公司 44379 | 代理人: | 史亮亮 |
| 地址: | 528000 广东省佛山市禅城区*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 存储服务器 分布式文件系统 元数据服务层 首尾相连 存储 数据块信息 用户应用层 元数据信息 操作日志 对等关系 后继节点 环状结构 前驱节点 用户文件 容错率 心跳包 映射表 云存储 单点 主备 备用 写入 发送 管理 | ||
1.一种基于多对等NameNode分布式文件系统,其特征在于:包括用户应用层、元数据服务层和存储服务器层,所述元数据服务层包括多个部分对等的NameNode,多个所述NameNode首尾相连形成一个环状结构;
每个NameNode既是它前驱节点的备用NameNode,同时又是它后继节点的主备NameNode;
每个NameNode均存储有特定用户文件的所有元数据信息和操作日志文件,并管理所述存储服务器层中的部分特定的存储服务器;
每个NameNode均接收所管理的存储服务器所发送的心跳包和数据块信息;
每个NameNode均设置有一个特定的NameNode ID,每个NameNode均存储有NameNode ID与IP地址之间的映射表。
2.根据权利要求1所述一种基于多对等NameNode分布式文件系统,其特征在于:
所述存储服务器层由多台存储服务器组成,每台所述存储服务器均设置有一个DataNode;
每个NameNode管理所述存储服务器中特定的DataNode,被管理的所述DataNode定期发送心跳包和数据块信息给管理自己的NameNode。
3.根据权利要求1所述一种基于多对等NameNode分布式文件系统,其特征在于:
所述用户应用层用于向NameNode发送RPC请求来建立通信连接。
4.一种基于多对等NameNode分布式文件系统的写入方法,其特征在于:
包括用户应用层、元数据服务层和存储服务器层,所述元数据服务层包括多个部分对等的NameNode,多个所述NameNode首尾相连形成一个环状结构;所述存储服务器层由多台存储服务器组成,每台所述存储服务器均设置有一个DataNode;所述用户应用层用于向NameNode发送RPC请求来建立通信连接;
包括文件写入的过程:
步骤一:用户随机向所述元数据服务层中的一个NameNode发送链接请求;
步骤二:NameNode根据用户自定义的算法为用户选择一个主NameNode和备用NameNode,并将所述主NameNode和所述备用NameNode的IP信息返回给用户,所述IP信息包括主IP地址;
步骤三:用户收到所述IP信息后,根据主IP地址向所述主NameNode发送用户请求信息表,所述主NameNode做IP对比,如果IP对比结果相同,则用户请求信息表中的file对文件进行分块处理形成文件块,为用户选择所述存储服务器层的DataNode,同时生成元数据文件;
步骤四:所述主NameNode将所述文件块在DataNode的地址列表发送给用户;
步骤五:所述主NameNode将所述元数据文件发送给所述备用NameNode;
步骤六:所述备用NameNode接收主NameNode发送的所述元数据文件,并对所述元数据文件进行合并操作,然后将合并操作过的元数据文件定期返回至所述主NameNode;
步骤七:用户联系所述DataNode存储用户数据;
步骤八:所述DataNode将用户副本进行复制并存储在其他节点上;
步骤九:若所述DataNode将用户副本成功复制并存储成功,则DataNode向所述主NameNode返回成功信息;
步骤十:所述主NameNode向用户返回写入成功的信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广东睿江云计算股份有限公司,未经广东睿江云计算股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810305535.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:网络状态评估方法及装置
- 下一篇:网关系统、设备和通信方法





