[发明专利]一种数据同步方法、装置、设备和存储介质

权利要求书

1.一种数据同步方法，其特征在于，包括：

获取源数据库中的多条数据操作记录；

根据每条所述数据操作记录中的表名称信息和标识字段信息，确定每条所述数据操作记录对应的目标哈希值，其中所述标识字段信息用于唯一标识表中的一条数据操作记录；

基于所述目标哈希值和所述多条数据操作记录对应的记录顺序，将具有相同目标哈希值的各条数据操作记录按照所述记录顺序分发至同一线程中，以使各个线程并行执行相应的数据同步任务。

2.根据权利要求1所述的方法，其特征在于，根据每条所述数据操作记录中的表名称信息和标识字段信息，确定每条所述数据操作记录对应的目标哈希值，包括：

确定每条所述数据操作记录中的表名称信息对应的第一哈希值和标识字段信息对应的第二哈希值；

基于所述第一哈希值和所述第二哈希值，确定所述数据操作记录对应的目标哈希值。

3.根据权利要求2所述的方法，其特征在于，基于所述第一哈希值和所述第二哈希值，确定所述数据操作记录对应的目标哈希值，包括：

将所述第一哈希值和所述第二哈希值进行相加，获得的相加结果确定为所述数据操作记录对应的目标哈希值。

4.根据权利要求1所述的方法，其特征在于，基于所述目标哈希值和所述多条数据操作记录对应的记录顺序，将具有相同目标哈希值的各条数据操作记录按照所述记录顺序分发至同一线程中，以使各个线程并行执行相应的数据同步任务，包括：

确定每个所述目标哈希值与每个线程之间的对应关系；

按照所述多条数据操作记录对应的记录顺序，基于每条所述数据操作记录对应的目标哈希值和所述对应关系，逐条将所述数据操作记录分发至相应线程中；

通过并发执行各个线程，将每个线程中的各条数据操作记录逐个写入至目标数据库中的相应表中。

5.根据权利要求4所述的方法，其特征在于，确定每个所述目标哈希值与每个线程之间的对应关系，包括：

若所述目标哈希值的数量小于或等于预设线程数量，则从各线程中选取与所述目标哈希值的数量相同的线程，并确定每个所述目标哈希值与选取的每个线程之间的对应关系；

若所述目标哈希值的数量大于预设线程数量，则对各个所述目标哈希值进行划分，获得所述预设线程数量的目标哈希值集合，并基于各所述目标哈希值集合，确定每个所述目标哈希值与每个线程之间的对应关系。

6.根据权利要求5所述的方法，其特征在于，对各个所述目标哈希值进行划分，获得预设线程数量的目标哈希值集合，包括：

将每个所述目标哈希值除以所述预设线程数量，获得每个所述目标哈希值对应的余数；

将具有相同余数的各个目标哈希值划分为一个目标哈希值集合。

7.根据权利要求5所述的方法，其特征在于，对各个所述目标哈希值进行划分，获得所述预设线程数量的目标哈希值集合，包括：

基于具有幂等性的预设负载均衡函数，对每个所述目标哈希值进行更新处理，获得更新后的目标哈希值；

对各个更新后的目标哈希值进行划分，获得所述预设线程数量的目标哈希值集合。

8.一种数据同步装置，其特征在于，包括：

数据操作记录获取模块，用于获取源数据库中的多条数据操作记录；

目标哈希值确定模块，用于根据每条所述数据操作记录中的表名称信息和标识字段信息，确定每条所述数据操作记录对应的目标哈希值，其中所述标识字段信息用于唯一标识表中的一条数据操作记录；

数据处理模块，用于基于所述目标哈希值和所述多条数据操作记录对应的记录顺序，将具有相同目标哈希值的各条数据操作记录按照所述记录顺序分发至同一线程中，以使各个线程并行执行相应的数据同步任务。

9.一种设备，其特征在于，所述设备包括：

一个或多个处理器；

存储器，用于存储一个或多个程序；

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-7中任一所述的数据同步方法。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-7中任一所述的数据同步方法。