[发明专利]数据转移控制方法及装置

说明书

技术领域

本发明涉及数据转移方法及装置，更具体地，涉及数据转移控制方法及装置。

背景技术

目前，随着网络应用的日益广泛以及不同领域的业务种类的日益丰富，保持多个服务器中的数据的一致性和实时性变的越来越重要。但是，在转移大量的数据的过程中会遇到很多技术问题，例如，当待转移的数据量较大时，完成全部数据的转移需要较长的一段时间，在此期间，如果用户对源数据库的某一记录进行了修改操作，而该记录已经转移完成，则目标数据库中对应的记录将仍然保持用户操作前的状态。因此，在现有的数据转移方法中，一般都要求在数据转移过程中禁止用户对数据进行操作。然而，现有的以定期停机方式进行的数据批量转移方法不能满足对数据实时性和一致性的要求，也不能有效控制数据转移速度，并且会使服务暂时中断。

发明内容

为了解决上述现有技术方案所存在的缺陷，本发明提出了一种可以控制数据转移速度，并能保持数据的实时性和一致性的数据转移控制方法及装置。

本发明的目的是通过以下技术方案实现的：

一种数据转移控制方法，所述数据转移控制方法包括如下步骤：

(A1)读取配置信息；

(A2)根据所述配置信息选择转移模式，并使用系统当前时间和时间片以及所选择的转移模式确定转移开始时间和转移结束时间；

(A3)基于所述转移开始时间和转移结束时间依次读取数据记录，并完成转移任务记录表；

(A4)将所述转移任务记录表发送给转移任务执行模块，以完成数据转移任务；

(A5)根据当前的转移模式以及所述时间片重新确定转移开始时间和转移结束时间，并返回步骤(A3)。

在上面所公开的方案中，优选地，所述转移模式包括实时模式和非实时模式。

在上面所公开的方案中，优选地，所述数据记录具有时间相关字段，用于记录该数据记录被操作完成时的当前系统时间。

在上面所公开的方案中，可选地，在所述实时模式下，步骤(A2)进一步包括如下步骤：获取当前系统时间；将当前系统时间减去特定时间作为转移开始时间；将所述转移开始时间加上时间片作为转移结束时间，其中，所述特定时间为n秒，且0＜n＜60。

在上面所公开的方案中，可选地，在所述实时模式下，步骤(A3)进一步包括如下步骤：读取状态为“操作完成”的所有数据记录；依次判断每条数据记录的操作完成时间是否小于所述转移结束时间并大于所述转移开始时间；如果数据记录的操作完成时间小于所述转移结束时间并大于所述转移开始时间，则将所述数据记录的状态更新为“待转移”，并同时更新所述转移任务记录表。

在上面所公开的方案中，可选地，在所述实时模式下。步骤(A5)进一步包括如下步骤：读取系统当前时间；将所述系统当前时间减去所述特定时间作为备选转移开始时间；将所述备选转移开始时间加上所述时间片作为新的转移结束时间；判断所述备选转移开始时间是否大于上次转移结束时间，如果所述备选转移开始时间大于上次转移结束时间，则将所述备选转移开始时间作为新的转移开始时间，否则，将上次转移结束时间作为新的转移开始时间。

在上面所公开的方案中，可选地，在所述非实时模式下，步骤(A2)进一步包括如下步骤：获取当前系统时间；根据配置信息设置转移开始时间和转移结束时间。

在上面所公开的方案中，可选地，在所述非实时模式下，步骤(A3)进一步包括如下步骤：读取状态为“操作完成”的所有数据记录；依次判断每条数据记录的操作完成时间是否小于所述转移结束时间；如果数据记录的操作完成时间小于所述转移结束时间，则将所述数据记录的状态更新为“待转移”，并同时更新所述转移任务记录表。

在上面所公开的方案中，可选地，在所述非实时模式下，步骤(A5)进一步包括如下步骤：将所述转移结束时间作为新的转移开始时间，并将所述转移结束时间加上所述时间片作为新的转移结束时间；读取系统当前时间并判断所述系统当前时间是否大于所述新的转移结束时间；如果所述系统当前时间小于所述新的转移结束时间，则等待并在特定时间后重复读取及判断，如果所述系统当前时间大于所述新的转移结束时间，则返回步骤(A3)。

本发明的目的也可以通过以下技术方案实现：

一种数据转移控制装置，所述数据转移控制装置包括初始化模块、模式选择模块、主控制模块、数据记录读取模块、转移任务调度模块和转移起止时间设置模块，其中，

所述初始化模块与所述主控制模块相连接，用于读取配置信息，并将所述配置信息发送给所述主控制模块；