[发明专利]一种智能分库实时数据迁移方法和装置

权利要求书

1.一种智能分库实时数据迁移方法，其特征在于，包括：

基于数据迁移指令生成多个迁移任务，各迁移任务是指将源数据库中的部分待迁移数据迁移至目标数据库；通过使用概率，用户访问量，使用频率确定各迁移任务的可执行时间段；基于各迁移任务对应的可执行时间段的数量确定各迁移任务在其可执行时间段内的优先级；对应更多可执行时间段的迁移任务的优先级更低；

对于各迁移任务，首先将所述部分待迁移数据复制并写入到所述目标数据库，然后校验写入到目标数据库中的数据与源数据库中的所述部分待迁移数据的一致性，若一致，则删除源数据库中的所述部分待迁移数据，该迁移任务完成，若不一致，则删除写入到目标数据库中的数据并重新执行该迁移任务；

其中，在所述复制和写入数据过程中，所述源数据库的所述待迁移数据的用户使用权限处于开放状态，仅在所述校验过程中，所述源数据库和所述目标数据库的用户使用权限处于关闭状态。

2.根据权利要求1所述的方法，其特征在于，所述基于数据迁移指令生成多个迁移任务，包括：

基于所述源数据库中的待迁移数据的历史操作记录，将所述待迁移数据分成多个部分待迁移数据；

基于所述多个部分待迁移数据生成多个迁移任务。

3.根据权利要求2所述的方法，其特征在于，还包括：

基于各迁移任务分别对应的部分待迁移数据确定各迁移任务的执行时间或者各迁移任务之间的执行顺序；

基于所述各迁移任务的执行时间或者各迁移任务之间的执行顺序执行所述多个迁移任务。

4.根据权利要求3所述的方法，其特征在于，所述基于各迁移任务分别对应的部分待迁移数据确定各迁移任务的执行时间，包括：

基于各迁移任务分别对应的部分待迁移数据的历史操作记录，确定各迁移任务的可执行时间段，其中，每个迁移任务对应至少一个可执行时间段。

5.根据权利要求4所述的方法，其特征在于，所述基于各迁移任务分别对应的部分待迁移数据确定各迁移任务之间的执行顺序，包括：

基于各迁移任务分别对应的部分待迁移数据确定各迁移任务在其可执行时间段内的优先级。

6.根据权利要求5所述的方法，其特征在于，所述基于所述各迁移任务的执行时间或者各迁移任务之间的执行顺序执行所述多个迁移任务，包括：

在各时间段内，基于该时间段对应的可执行的迁移任务的优先级依次执行各可执行的迁移任务。

7.根据权利要求5所述的方法，其特征在于，所述基于各迁移任务分别对应的部分待迁移数据确定各迁移任务在其可执行时间段内的优先级，包括：

基于各迁移任务对应的可执行时间段的数量确定各迁移任务在其可执行时间段内的优先级；以及/或者

基于各迁移任务对应的部分待迁移数据的数据量确定各迁移任务在其可执行时间段内的优先级；以及/或者

基于各迁移任务对应的执行状况确定各迁移任务在其可执行时间段内的优先级。

8.一种智能分库实时数据迁移装置，其特征在于，包括：

任务生成模块，用于基于数据迁移指令生成多个迁移任务，各迁移任务是指将源数据库中的部分待迁移数据迁移至目标数据库；通过使用概率，用户访问量，使用频率确定各迁移任务的可执行时间段；基于各迁移任务对应的可执行时间段的数量确定各迁移任务在其可执行时间段内的优先级；对应更多可执行时间段的迁移任务的优先级更低；

数据迁移模块，用于对于各迁移任务，首先将所述部分待迁移数据复制并写入到所述目标数据库，然后校验写入到目标数据库中的数据与源数据库中的所述部分待迁移数据的一致性，若一致，则删除源数据库中的所述部分待迁移数据，该迁移任务完成，若不一致，则删除写入到目标数据库中的数据并重新执行该迁移任务；

其中，在所述复制和写入数据过程中，所述源数据库的所述待迁移数据的用户使用权限处于开放状态，仅在所述校验过程中，所述源数据库和所述目标数据库的用户使用权限处于关闭状态。