[发明专利]一种数据迁移集群及数据迁移方法

权利要求书

1.一种数据迁移集群，其特征在于，所述数据迁移集群分别与第一分布式数据库和第二分布式数据库连接；

所述数据迁移集群为分布式集群，包括集群管理节点和多个集群执行节点，每个集群执行节点与所述第一分布式数据库的至少一个存储节点部署在一台设备上；

所述集群管理节点，用于接收由数据迁移工具启动的一个Map任务提交的数据迁移任务，并将所述数据迁移任务分发给各个集群执行节点；

所述各个集群执行节点，用于读取与自身部署在一台设备上的存储节点的数据，并将读取的数据存储至所述第二分布式数据库；

所述集群管理节点，还用于监测所述各个集群执行节点对所述数据读取任务的执行情况，并通过所述各个集群执行节点对所述数据迁移任务的执行情况向所述Map任务返回所述数据迁移任务的执行状态信息。

2.根据权利要求1所述的数据迁移集群，其特征在于，所述集群管理节点，还用于在接收所述Map任务提交的所述数据迁移任务的同时，接收所述Map任务提交的回调地址；

则所述集群管理节点，具体用于基于所述回调地址，通过所述各个集群执行节点对所述数据迁移任务的执行情况，向所述Map任务返回所述数据迁移任务的执行状态信息。

3.根据权利要求2所述的数据迁移集群，其特征在于，所述集群管理节点，具体用于在将所述数据迁移任务分发给所述各个集群执行节点之后，基于所述回调地址向所述Map任务返回所述数据迁移任务开始执行的指示信息，以使所述Map任务在接收到所述数据迁移任务开始执行的指示信息时，将自身维护的任务状态信息由任务准备更新为任务执行；

以及，在所述各个集群执行节点对所述数据迁移任务均执行成功时，基于所述回调地址向所述Map任务返回所述数据迁移任务执行成功的指示信息，以使所述Map任务在接收到所述数据迁移任务执行成功的指示信息时，将所述自身维护的状态信息由所述任务执行更新为任务执行成功；

以及，在所述多个集群执行节点中的至少一个集群执行节点对所述数据迁移任务执行失败时，基于所述回调地址向所述Map任务返回所述数据迁移任务执行失败的指示信息，以使所述Map任务在接收到所述数据迁移任务执行失败的指示信息时，重新向所述集群管理节点提交所述数据迁移任务。

4.根据权利要求1至3中任意一项所述的数据迁移集群，其特征在于，所述集群管理节点，还用于在向所述Map任务返回所述数据迁移任务的执行状态信息之后，判断预设时间内是否接收到所述Map任务对所述执行状态信息的响应信息，如果在所述预设时间内未接收到所述Map任务对所述执行状态信息的响应信息，则启动轮询机制，直至所述Map任务成功接收到所述数据迁移任务的执行状态信息。

5.一种数据迁移方法，其特征在于，应用于数据迁移集群，所述数据迁移集群分别与第一分布式数据库和第二分布式数据库连接，所述数据迁移集群为分布式集群，包括集群管理节点和多个集群执行节点，每个集群执行节点与所述第一分布式数据库的至少一个存储节点部署在一台设备上；

所述数据迁移方法包括：

所述集群管理节点接收由数据迁移工具启动的一个Map任务提交的数据迁移任务；

所述集群管理节点将所述数据迁移任务分发给各个集群执行节点；

所述各个集群执行节点读取与自身部署在一台设备上的存储节点的数据，并将读取的数据存储至所述第二分布式数据库；

所述集群管理节点监测所述各个集群执行节点对所述数据读取任务的执行情况；

所述集群管理节点通过所述各个集群执行节点对所述数据迁移任务的执行情况，向所述Map任务返回所述数据迁移任务的执行状态信息。

6.根据权利要求5所述数据迁移方法，其特征在于，所述数据迁移方法还包括：

所述集群管理节点接收所述Map任务提交的回调地址；

则所述集群管理节点通过所述各个集群执行节点对所述数据迁移任务的执行情况，向所述Map任务返回所述数据迁移任务的执行状态信息，包括：

所述集群管理节点基于所述回调地址，通过所述各个集群执行节点对所述数据迁移任务的执行情况，向所述Map任务返回所述数据迁移任务的执行状态信息。