[发明专利]一种数据迁移的方法以及相关装置

说明书

本申请公开了一种数据迁移的处理方法以及相关装置，通过获取需要进行数据迁移的第一从节点的文件列表；然后将该第一从节点的文件列表备份到备份系统；当迁移进程触发时为待迁移的数据创建第二从节点；并从该备份系统中下载该第一从节点的文件列表；进而恢复出该待迁移的数据并存储到该第二从节点。从而实现了主从节点在不停止服务下的数据迁移，由于迁移的数据经由备份系统处理，不会对主节点或上层节点造成侵入，进而避免了数据丢失的风险，提高了数据库运行的稳定性。

技术领域

本申请涉及计算机技术领域，尤其涉及一种数据迁移的方法以及相关装置。

背景技术

随着互联网网站的兴起，传统的关系数据库在应付超大规模和高并发的社会性网络服务(social networking serivces，SNS)类型的web 2.0纯动态网站存在很多难以克服的问题，而非关系型的数据库则由于其本身的特点得到了非常迅速的发展，非关系数据库可以解决大规模数据集合带来的挑战，但随着数据量的增加数据库节点的故障率也随之升高，如何应对故障的发生成为难题。

一般，可以停止数据库服务并选择其中的一个从库，作为数据源；然后通过拷贝数据库源文件到新增节点；在拷贝完成后，将源节点与新增节点都启动；进而重新加入集群，源节点和新增节点都继续主从同步过程，以实现数据的迁移。

但是，在大规模数据的读写过程中，停止数据库进行数据迁移一方面影响数据库的服务效率；另一方面停止数据库的进程可能会导致副本集中只有主节点可提供服务，此时主节点为单点，存在严重的数据丢失风险，影响数据库运行的稳定性。

发明内容

有鉴于此，本申请提供一种数据迁移的方法，可以减少数据迁移过程中对于数据库运行状态的影响，提高数据库运行的稳定性。

本申请第一方面提供一种数据迁移的方法，可以应用于包含数据库或需要进行数据读写的系统或程序中，具体包括：获取需要进行数据迁移的第一从节点的文件列表，所述第一从节点部署在副本集中的主节点之下，所述文件列表包含所述第一从节点中待迁移的数据的快照；

将所述第一从节点的文件列表备份到备份系统；

为待迁移的数据创建第二从节点，所述第二从节点部署于所述主节点之下；

从所述备份系统中下载所述第一从节点的文件列表；

根据所述第一从节点中待迁移的数据的快照恢复出所述待迁移的数据；

将所述待迁移的数据存储到所述第二从节点。

可选的，在本申请一些可能的实现方式中，所述获取需要进行数据迁移的第一从节点的文件列表，包括：

获取所述主节点和所述第一从节点之间的第一主从延迟；

若所述第一主从延迟小于第一阈值，则获取需要进行数据迁移的第一从节点的文件列表。

可选的，在本申请一些可能的实现方式中，所述将所述第一从节点的文件列表备份到备份系统，包括：

解析所述文件列表的进程日志，以获取文件状态；

若所述文件状态满足预设条件，则将所述第一从节点的文件列表备份到备份系统。

可选的，在本申请一些可能的实现方式中，所述将所述第一从节点的文件列表备份到备份系统，包括：

遍历所述第一从节点的续约状态；

根据所述续约状态进行备份，以将所述第一从节点的文件列表备份到备份系统。

可选的，在本申请一些可能的实现方式中，所述为待迁移的数据创建第二从节点，包括：

为所述副本集设置全局锁，以获取所述副本集的一致性状态；