[发明专利]基于HADOOP的数据处理方法、访问代理装置和系统

权利要求书

1.一种基于海杜普HADOOP的数据处理方法，包括：

接收来自客户端的访问请求，所述访问请求包括客户端标识；

根据所述客户端标识选择位置与所述客户端的位置相当的名称节点NameNode；

将所述访问请求转发给选择的NameNode。

2.根据权利要求1所述的方法，其中，所述选择位置与所述客户端的位置相当的NameNode包括：

确定与所述客户端的位置最接近的NameNode和NameNode的运行资源占用率；

将NameNode的运行资源占用率与预定门限相比较：

若NameNode的运行资源占用率大于等于预定门限，则

确定下一优先级的NameNode的运行资源占用率，并与预定门限相比较，若NameNode的运行资源占用率大于等于预定门限，则

确定下一优先级的NameNode的运行资源占用率并与预定门限相比较，直至NameNode的运行资源占用率小于预定门限NameNode，确定选择的NameNode；

其中，所述NameNode与客户端之间的距离越短优先级越高。

3.根据权利要求1或2所述的方法，其中，所述客户端标识为客户端地址信息；

所述选择位置与所述客户端的位置相当的NameNode包括：

根据所述客户端地址信息和NameNode的地址信息确定所述客户端与所述NameNode间的路径；

根据所述客户端与NameNode之间的路径长度选择位置与所述客户端的位置相当的NameNode。

4.根据权利要求1所述的方法，其中，所述客户端标识为客户端位置信息；

所述选择位置与所述客户端的位置相当的NameNode包括：

根据所述客户端位置信息和NameNode的位置信息选择与所述客户端位于同一机房的NameNode。

5.根据权利要求1所述的方法，其中，所述根据所述客户端标识选择NameNode包括：

根据预存的客户端标识的位置信息确定所述客户端位于的机房；

根据预存的NameNode的位置信息确定与所述客户端位于相同机房的NameNode；

选择与所述客户端位于同一机房的NameNode。

6.根据权利要求4或5所述的方法，其中，所述选择与所述客户端位于同一机房的NameNode包括：

在存在多个NameNode与所述客户端位于相同机房的情况下，则从与所述客户端位于相同机房的NameNode中：

随机选择一个NameNode，或根据NameNode的运行资源占用率选择NameNode，或根据NameNode的预定优先级选择NameNode。

7.根据权利要求1所述的方法，还包括：

接收来自NameNode的访问结果并转发给客户端。

8.一种基于海杜普HADOOP的访问代理装置，包括：

接收单元，被配置为接收来自客户端的访问请求，所述访问请求包括客户端标识；

节点选择单元，被配置为根据所述客户端标识选择位置与所述客户端的位置相当的名称节点NameNode；

转发单元，被配置为将所述访问请求转发给选择的NameNode，以便所述NameNode。