[发明专利]数据规整迁移方法、装置、计算机设备和存储介质

权利要求书

1.一种数据规整迁移方法，其特征在于，所述方法包括：

根据预设的源库分库分表规则和源数据表迁移批次信息，从源数据库中读取本批次迁移数据；

根据预设的数据规整规则对所述本批次迁移数据进行数据分析，获得分析结果，所述数据规整规则包括数据划分规则和数据过滤条件，所述分析结果包括清洁数据表、待查数据表、日志数据表和垃圾数据表；

校验所述清洁数据表、所述待查数据表、所述日志数据表和所述垃圾数据表中的数据与所述本批次迁移数据的一致性；

若一致，则根据预设的目标库分库分表规则，将所述清洁数据表中的数据写入目标数据库中；

检测对所述待查数据表中数据的选取操作，根据所述目标库分库分表规则，将选出的数据写入所述目标数据库。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

校验所述清洁数据表、所述待查数据表、所述日志数据表和所述垃圾数据表中的数据是否符合所述数据规整规则；

若所述清洁数据表、所述待查数据表、所述日志数据表和所述垃圾数据表中的数据，与所述本批次迁移数据一致且符合所述数据规整规则，则进入所述根据预设的目标库分库分表规则，将所述清洁数据表中的数据写入目标数据库中的步骤。

3.根据权利要求1或2所述的方法，其特征在于，所述方法还包括：

检测本批次导入所述目标数据库中的数据是与所述清洁数据表中的数据以及所述选出的数据一致；

若一致，发送所述本批次迁移数据的迁移完成提示信息。

4.根据权利要求1所述的方法，其特征在于，所述根据预设的源库分库分表规则和源数据表迁移批次信息，从源数据库中读取本批次迁移数据，包括：

根据所述源库分库分表规则和所述源数据表迁移批次信息，确定待迁移数据；

根据所述源数据表迁移批次信息，将所述待迁移数据的迁移任务拆分成多个迁移子任务；

在所述本批次迁移数据的迁移子任务启动后，从源数据库中读取所述本批次迁移数据。

5.根据权利要求4所述的方法，其特征在于，所述方法还包括：

显示数据迁移进度信息，所述数据迁移进度信息包括所述本批次迁移数据的当前迁移进程信息、所述待迁移数据的已迁移批次信息、所述待迁移数据的数据迁移完成率、所述待迁移数据的未迁移批次信息、所述本批次迁移数据的预计迁移完成时间和所述待迁移数据的预计迁移完成时间中的任意一个或者任意组合。

6.根据权利要求1所述的方法，其特征在于，所述根据预设的源库分库分表规则和源数据表迁移批次信息，从源数据库中读取本批次迁移数据，包括：

根据预设的源库分库分表规则和源数据表迁移批次信息，从源数据库中读取本批次迁移原数据；

按照预设的过滤规则，对所述本批次迁移原数据进行过滤处理，得到所述本批次迁移数据。

7.一种数据规整迁移装置，其特征在于，所述装置包括：

读取模块，用于根据预设的源库分库分表规则和源数据表迁移批次信息，从源数据库中读取本批次迁移数据；

规整模块，用于根据预设的数据规整规则对所述本批次迁移数据进行数据分析，获得分析结果，所述数据规整规则包括数据划分规则和数据过滤条件，所述分析结果包括清洁数据表、待查数据表、日志数据表和垃圾数据表；

第一校验模块，用于校验所述清洁数据表、所述待查数据表、所述日志数据表和所述垃圾数据表中的数据与所述本批次迁移数据的一致性；

写入模块，用于在所述第一校验模块 的校验结果为一致时，根据预设的目标库分库分表规则，将所述清洁数据表中的数据写入目标数据库中，并检测对所述待查数据表中数据的选取操作，根据所述目标库分库分表规则，将选出的数据写入所述目标数据库。