[发明专利]一种数据管理方法及Hadoop分布式文件系统

权利要求书

1.一种数据管理方法，其特征在于，运行于Hadoop分布式文件系统集群节点上，所述集群节点包括代理节点以及元数据节点，所述数据管理方法包括：

通过所述代理节点接收一客户端发起的数据处理请求；

在所述代理节点上基于预建立的哈希模型、所述数据处理请求确定与所述数据处理请求对应的元数据节点；

通过所述代理节点向所述元数据节点发送所述数据处理请求；

通过所述元数据节点响应所述数据处理请求而反馈报文至所述客户端；

所述在所述代理节点上基于预建立的哈希模型、所述数据处理请求确定与所述数据处理请求对应的元数据节点的步骤包括：

在所述代理节点上解析所述数据处理请求，获取与所述数据处理请求对应的上传路径；

在所述代理节点上基于预建立的哈希模型、所述上传路径计算与所述数据处理请求对应的关键字值；

在所述代理节点上将从预建立的哈希环中预先确定的与所述关键字值映射的元数据节点，确定为与所述数据处理请求对应的元数据节点；

所述数据处理请求包括写入请求，所述预建立的哈希环包括完成元数据迁移前的历史哈希环及完成元数据迁移后的当前哈希环，所述在所述代理节点上基于预建立的哈希模型、所述数据处理请求确定与所述数据处理请求对应的元数据节点的步骤还包括：

在所述代理节点上解析所述写入请求，获取与所述写入请求对应的文件名；

在所述代理节点上将从预建立的哈希环中预先确定的与所述关键字值映射的元数据节点确定为与所述数据处理请求对应的元数据节点的步骤包括：

通过所述代理节点向从所述历史哈希环中预先确定的与所述关键字值映射的第一元数据节点发起查询请求，以查询所述第一元数据节点中是否存在所述文件名；

当所述第一元数据节点中不存在所述文件名时，通过所述代理节点向从所述当前哈希环中预先确定的与所述关键字值映射的第二元数据节点发起查询请求以查询所述第二元数据节点中是否存在所述文件名；

当所述第二元数据节点中不存在文件名时，在所述代理节点上将所述第二元数据节点确定为与所述写入请求对应的元数据节点。

2.如权利要求1所述的数据管理方法，其特征在于，所述数据处理请求包括写入请求，所述预建立的哈希环包括完成元数据迁移后的当前哈希环，所述在所述代理节点上基于预建立的哈希模型、所述数据处理请求确定与所述数据处理请求对应的元数据节点的步骤还包括：

在所述代理节点上解析所述写入请求，获取与所述写入请求对应的文件名；

在所述代理节点上将从预建立的哈希环中预先确定的与所述关键字值映射的元数据节点确定为与所述数据处理请求对应的元数据节点的步骤包括：

通过所述代理节点向从当前哈希环中确定的与所述关键字值映射的元数据节点发起查询请求，以查询所述元数据节点中是否存在所述文件名；

当所述元数据节点中不存在所述文件名时，将不存在所述文件名的元数据节点确定为与所述写入请求对应的元数据节点。

3.如权利要求1所述的数据管理方法，其特征在于，所述数据处理请求包括读取请求，所述预建立的哈希环包括完成元数据迁移后的当前哈希环，所述在所述代理节点上基于预建立的哈希模型、所述数据处理请求确定与所述数据处理请求对应的元数据节点的步骤还包括：

在所述代理节点上解析所述读取请求，获取与所述读取请求对应的文件名；

在所述代理节点上将从预建立的哈希环中预先确定的与所述关键字值映射的元数据节点确定为与所述数据处理请求对应的元数据节点的步骤包括：

通过所述代理节点向从当前哈希环中确定的与所述关键字值映射的元数据节点发起查询请求，以查询所述元数据节点中是否存在所述文件名；

当所述元数据节点中存在所述文件名时，将存在所述文件名的元数据节点确定为与所述读取请求对应的元数据节点。