[发明专利]一种智能分库实时数据迁移方法和装置

说明书

本发明公开了一种智能分库实时数据迁移方法、装置、电子设备和计算机可读介质。该方法包括：基于数据迁移指令生成多个迁移任务，各迁移任务是指将源数据库中的部分待迁移数据迁移至目标数据库，对于各迁移任务，首先将所述部分待迁移数据复制到所述目标数据库，然后校验复制到目标数据库中的数据与源数据库中的所述部分待迁移数据的一致性，若一致，则删除源数据库中的所述部分待迁移数据，该迁移任务完成，若不一致，则删除复制到目标数据库中的数据并重新执行该迁移任务，其中，在所述复制数据过程中，所述源数据库的所述待迁移数据的用户使用权限处于开放状态，在所述校验过程中，所述源数据库和所述目标数据库的用户使用权限处于关闭状态。

技术领域

本发明涉及计算机信息处理领域，具体而言，涉及一种智能分库实时数据迁移方法、装置、电子设备及计算机可读存储介质。

背景技术

随着计算机技术的快速发展，各种各样的数据库类型以及数据库架构被越来越多地应用于工作和日常生活等诸多领域。为了提高数据交换效率，或者保证数据实时性等情况，通常需要在多个数据库之间进行数据同步或者数据迁移操作。

目前，在数据同步或者迁移的过程中，通常会锁死源数据库和目标数据库，以保证同步或者迁移的准确性。

在实现发明构思的过程中，发明人发现现有技术中至少存在如下问题，即，现有技术在数据同步或迁移的过程中限制了用户的使用权限，降低了数据库的可用性，导致用户体验不佳。

发明内容

本发明旨在解决现有技术在数据同步或迁移的过程中限制用户的使用权限，降低了数据库的可用性，导致用户体验不佳的问题。

为了解决上述技术问题，本发明第一方面提出一种智能分库实时数据迁移方法，其特征在于，包括：基于数据迁移指令生成多个迁移任务，各迁移任务是指将源数据库中的部分待迁移数据迁移至目标数据库，对于各迁移任务，首先将所述部分待迁移数据复制到所述目标数据库，然后校验复制到目标数据库中的数据与源数据库中的所述部分待迁移数据的一致性，若一致，则删除源数据库中的所述部分待迁移数据，该迁移任务完成，若不一致，则删除复制到目标数据库中的数据并重新执行该迁移任务，其中，在所述复制数据过程中，所述源数据库的所述待迁移数据的用户使用权限处于开放状态，在所述校验过程中，所述源数据库和所述目标数据库的用户使用权限处于关闭状态。

根据本发明的一种优选实施方式，所述基于数据迁移指令生成多个迁移任务，包括：基于所述源数据库中的待迁移数据的历史操作记录，将所述待迁移数据分成多个部分待迁移数据，基于所述多个部分待迁移数据生成多个迁移任务。

根据本发明的一种优选实施方式，所述方法还包括：基于各迁移任务分别对应的部分待迁移数据确定各迁移任务的执行时间或者各迁移任务之间的执行顺序，基于所述各迁移任务的执行时间或者各迁移任务之间的执行顺序执行所述多个迁移任务。

根据本发明的一种优选实施方式，所述基于各迁移任务分别对应的部分待迁移数据确定各迁移任务的执行时间，包括：基于各迁移任务分别对应的部分待迁移数据的历史操作记录，确定各迁移任务的可执行时间段，其中，每个迁移任务对应至少一个可执行时间段。

根据本发明的一种优选实施方式，所述基于各迁移任务分别对应的部分待迁移数据确定各迁移任务之间的执行顺序，包括：基于各迁移任务分别对应的部分待迁移数据确定各迁移任务在其可执行时间段内的优先级。

根据本发明的一种优选实施方式，所述基于所述各迁移任务的执行时间或者各迁移任务之间的执行顺序执行所述多个迁移任务，包括：在各时间段内，基于该时间段对应的可执行的迁移任务的优先级依次执行各可执行的迁移任务。