[发明专利]一种数据同步方法、装置、设备和存储介质

说明书

本发明实施例公开了一种数据同步方法、装置、设备和存储介质，该方法包括：获取源数据库中的多条数据操作记录；根据每条数据操作记录中的表名称信息和标识字段信息，确定每条数据操作记录对应的目标哈希值，其中标识字段信息用于唯一标识表中的一条数据操作记录；基于目标哈希值和多条数据操作记录对应的记录顺序，将具有相同目标哈希值的各条数据操作记录按照记录顺序分发至同一线程中，以使各个线程并行执行相应的数据同步任务。通过本发明实施例的技术方案，可以解决现有技术中无法对同一张表中的数据操作记录进行并发处理的情况，提高数据同步效率。

技术领域

本发明实施例涉及计算机技术，尤其涉及一种数据同步方法、装置、设备和存储介质。

背景技术

随着计算机技术的快速发展，通常需要对数据进行数据操作，比如写入操作、更新操作等，并基于源数据库中的数据操作记录，对目标数据库进行相应操作，实现数据同步。

现有技术中，通常是将源数据库中的数据操作记录基于表维度进行划分，将具有相同表名的数据操作记录，按照源数据库中的数据操作顺序发送至同一个线程中进行处理，以保证数据同步的准确性。

然而，在实现本发明过程中，发明人发现现有技术中至少存在如下问题：

现有数据同步方式是同一张表中的所有数据操作记录均由同一个线程顺序处理执行的，从而使得同一张表中的数据操作记录无法并发处理，大大降低了数据同步效率。

发明内容

本发明实施例提供了一种数据同步方法、装置、设备和存储介质，以解决现有技术中无法对同一张表中的数据操作记录进行并发处理的情况，提高数据同步效率。

第一方面，本发明实施例提供了一种数据同步方法，包括：

获取源数据库中的多条数据操作记录；

根据每条所述数据操作记录中的表名称信息和标识字段信息，确定每条所述数据操作记录对应的目标哈希值，其中所述标识字段信息用于唯一标识表中的一条数据操作记录；

基于所述目标哈希值和所述多条数据操作记录对应的记录顺序，将具有相同目标哈希值的各条数据操作记录按照所述记录顺序分发至同一线程中，以使各个线程并行执行相应的数据同步任务。

第二方面，本发明实施例还提供了一种数据同步装置，包括：

数据操作记录获取模块，用于获取源数据库中的多条数据操作记录；

目标哈希值确定模块，用于根据每条所述数据操作记录中的表名称信息和标识字段信息，确定每条所述数据操作记录对应的目标哈希值，其中所述标识字段信息用于唯一标识表中的一条数据操作记录；

数据处理模块，用于基于所述目标哈希值和所述多条数据操作记录对应的记录顺序，将具有相同目标哈希值的各条数据操作记录按照所述记录顺序分发至同一线程中，以使各个线程并行执行相应的数据同步任务。

第三方面，本发明实施例还提供了一种设备，所述设备包括：

一个或多个处理器；

存储器，用于存储一个或多个程序；

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明任意实施例所提供的数据同步方法。

第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明任意实施例所提供的数据同步方法。

上述发明中的实施例具有如下优点或有益效果：