[发明专利]用于分布式数据存储集群的数据迁移方法和装置

权利要求书

1.一种用于分布式数据存储集群的数据迁移方法，所述方法包括：获取源集群的工作节点的预写式日志WAL，所述WAL用于记录所述工作节点的已存储数据；

读取所述WAL的内容，以根据预设的数据迁移配置信息，从所述WAL中记录的所述工作节点的已存储数据中提取目标迁移数据；其中，所述预设的数据迁移配置信息用于表示目标迁移数据在数据库中的位置；将所述目标迁移数据发送至消息中间件，所述消息中间件用于向目标数据集群提供所述目标迁移数据；

所述方法还包括：

确定所述目标迁移数据在所述WAL中的位置；

若所述目标迁移数据发送至所述消息中间件失败，则从确定的所述位置处开始重新读取所述WAL的内容，以将所述目标迁移数据重复发送至所述消息中间件。

2.根据权利要求1所述的方法，其中，所述方法还包括：

若所述目标迁移数据发送至所述消息中间件成功，则根据确定的所述位置确定所述工作节点的数据迁移进度，并在所述源集群的公共存储空间中备份所述工作节点的数据迁移进度。

3.根据权利要求2所述的方法，其中，所述方法还包括：

确定所述源集群中数据迁移异常的工作节点，为该异常的工作节点开启数据迁移恢复线程；

通过所述数据迁移恢复线程，在所述源集群的公共存储空间中获取该异常的工作节点的数据迁移进度；

通过所述数据迁移恢复线程，根据该异常的工作节点的数据迁移进度，为该异常的工作节点迁移数据。

4.根据权利要求3所述的方法，其中，根据该异常的工作节点的数据迁移进度，为该异常的工作节点迁移数据，包括：

根据该异常的工作节点的数据迁移进度，确定该异常的工作节点未迁移的WAL；

从所述未迁移的WAL中获取该异常的工作节点的目标迁移数据；

将该异常的工作节点的目标迁移数据发送至消息中间件，以为该异常的工作节点迁移数据。

5.一种用于分布式数据存储集群的数据迁移装置，所述装置包括：

获取模块，用于获取源集群的工作节点的预写式日志WAL，所述WAL用于记录所述工作节点的已存储数据；

读取模块，用于读取所述WAL的内容，以根据预设的数据迁移配置信息，从所述WAL中记录的所述工作节点的已存储数据中提取目标迁移数据；其中，所述预设的数据迁移配置信息用于表示目标迁移数据在数据库中的位置；

迁移模块，用于将所述目标迁移数据发送至消息中间件，所述消息中间件用于向目标数据集群提供所述目标迁移数据；

第一位置确定模块，用于确定所述目标迁移数据在所述WAL中的位置；

回滚读取模块，用于若所述目标迁移数据发送至所述消息中间件失败，则从确定的所述位置处开始重新读取所述WAL的内容，以将所述目标迁移数据重复发送至所述消息中间件。

6.根据权利要求5所述的装置，其中，所述装置还包括：

第二位置确定模块，用于确定所述目标迁移数据在所述WAL中的位置；

进度备份模块，用于若所述目标迁移数据发送至所述消息中间件成功，则根据确定的所述位置确定所述工作节点的数据迁移进度，并在所述源集群的公共存储空间中备份所述工作节点的数据迁移进度。

7.根据权利要求6所述的装置，其中，所述装置还包括：

线程开启模块，用于确定所述源集群中数据迁移异常的工作节点，为该异常的工作节点开启数据迁移恢复线程；

进度获取模块，用于通过所述数据迁移恢复线程，在所述源集群的公共存储空间中获取该异常的工作节点的数据迁移进度；

迁移恢复模块，用于通过所述数据迁移恢复线程，根据该异常的工作节点的数据迁移进度，为该异常的工作节点迁移数据。

8.根据权利要求7所述的装置，其中，所述迁移恢复模块具体用于：

根据该异常的工作节点的数据迁移进度，确定该异常的工作节点未迁移的WAL；

从所述未迁移的WAL中获取该异常的工作节点的目标迁移数据；

将该异常的工作节点的目标迁移数据发送至消息中间件，以为该异常的工作节点迁移数据。