[发明专利]基于ZooKeeper的分布式数据交换方法

权利要求书

1.一种基于ZooKeeper的分布式数据交换方法，其特征在于，所述方法包括：

在分布式系统中构建集群化的ZooKeeper服务端，并建立客户端与服务器的连接，连接成功后保存会话连接；其中，ZooKeeper的视图结构使用的数据节点方式为Znode；所述ZooKeeper的节点构成的文件系统层级为树状结构，用于存储交换服务各节点的地址信息以及数据交换任务的执行位置和状态；

基于ARP协议配置ZooKeeper服务端中每台服务器的IP地址，其中包括真实IP地址和虚拟IP地址；

启动服务器的ARP缓存，从ZooKeeper会话中连接Master节点IP，并通过轮询方式推荐Slave节点IP；

基于推荐Slave节点IP在集群化的ZooKeeper服务端中获取可用服务器，并根据所获取的可用服务器与客户端完成交互。

2.根据权利要求1所述的方法，其特征在于，所述基于ARP协议配置ZooKeeper服务端中每台服务器的IP地址，包括：

使用虚拟IP和Zookeeper实现集群HA，所述HA使用双机集群的方式，其中，一台为Master节点，负责对外提供服务，另一台为MasterBak节点，负责备份Master中的数据。

3.根据权利要求2所述的方法，其特征在于，所述使用虚拟IP和Zookeeper实现集群HA，包括：

利用两台服务器向集群化的ZooKeeper服务端创建同名ZNode节点，根据ZNode的唯一性将节点创建成功的服务器作为Master节点，另一台服务器作为MasterBak节点。

4.根据权利要求1所述的方法，其特征在于，将分布式系统中集群化的ZooKeeper服务端中的每个节点划分为Leader节点、Follower节点和Observer节点；

所述Leader节点用于调度集群内部各台服务器，并对事务请求进行调度和处理，同时保证事务处理的FIFO；

所述Follower节点用于指定Leader节点，并参与客户端事务请求投票，处理客户端非事务请求，以及转发事务给Leader服务器；

所述Observer节点用于处理客户端非事务请求，以及转发事务给Leader服务器。

5.根据权利要求1所述的方法，其特征在于，所述在分布式系统中构建集群化的ZooKeeper服务端，包括：

构建2×N+1台服务器构成的Zookeeper集群，其中N表示所述Zookeeper集群允许服务器宕掉的最大数量。

6.根据权利要求1所述的方法，其特征在于，所述基于ARP协议配置ZooKeeper服务端中每台服务器的IP地址，还包括：

ZooKeeper服务端中每两台服务器之间的通信经由MAC地址实现的，包括对方的IP地址解析为MAC地址，将信息发送到对应的服务器上。

7.根据权利要求1所述的方法，其特征在于，所述基于推荐Slave节点IP在集群化的ZooKeeper服务端中获取可用服务器，并根据所获取的可用服务器与客户端完成交互，包括：

在集群化的ZooKeeper服务端中使用HDFS存储配置文件和数据信息，使用Yarn实现整个集群的资源管理和分配，其中：

所述HDFS采用Master/Slave架构，将集群节点分成NameNode、Secondary NameNode和DataNode三种，NameNode和Secondary NameNode运行在Master节点上，DataNode运行在Slave节点上；

所述Yarn采用Master/Slave架构，将集群节点分成ResourceManager、NodeManager和ApplicationMaster三种。