[发明专利]一种基于canal的数据库双向同步方法、介质及设备

说明书

本发明公开了一种基于canal的数据库双向同步方法、介质及设备，包括：当目标数据库发生变更操作时，根据操作日志生成同步数据。将同步数据发送至对应的专属存储空间中。按照第一预设周期获取同步存储空间中新增的同步数据。将新增的同步数据对应的匹配标识与目标数据库中的每一条数据对应的匹配标识进行匹配处理。以确定新增的同步数据是否为目标同步数据。将目标同步数据同步至目标数据库中。本申请通过中间服务作为桥梁实现两个异构网络的通信连接。另外，每一目标服务器既具有同步数据发送者的角色，同时还具有同步数据接收者的角色。并且会对数据进行匹配处理，以保证双向同步的正常进行，进而提高数据的一致性及完整性。

技术领域

本发明涉及数据处理领域，特别是涉及一种基于canal的数据库双向同步方法、介质及设备。

背景技术

随着网络的普及，网民人数数量成几何增长。在各行各业进中为了更加精准有效的进行运作管理，需要保证在两个异构网络中的数据的一致性，由此，对异构网络之间的数据同步有着极高的要求。如在数字化政务场景中，就需要将互联网数据同步进入到政务内网中。而政务内网与互联网就是异构网络，无法进行直通相连。由于，异构网络之间的数据无法进行直接的数据库主从复制同步，由此，数据更加容易形成孤岛，不便于使用。

现有技术中，大部分都是基于数据的单向流通同步，无法实现异构网络之间的数据的同步，进而导致两个异构网络之间的数据的一致性较低，不便于使用。

发明内容

针对上述技术问题，本发明采用的技术方案为：

根据本发明的一个方面，提供了一种基于canal的数据库双向同步方法，应用于第一系统，第一系统包括两个目标服务器及一个中间服务，两个目标服务器之间无法进行直接通信连接，中间服务中配置有每一目标服务器对应的消息存储空间，每一目标服务器均与专属存储空间及同步存储空间通信连接。专属存储空间为目标服务器对应配置的消息存储空间。同步存储空间为与目标服务器进行数据同步的目标服务器对应的消息存储空间。

每一所述目标服务器用于实现下述方法：

当目标数据库发生变更操作时，根据操作日志生成同步数据。同步数据包括数据主键、操作标识及变更后的数据本体。目标数据库为目标服务器中需要进行数据同步的数据库。操作标识包括对目标数据库的删除操作标识、增加操作标识及修改操作标识。

将同步数据发送至对应的专属存储空间中。

按照第一预设周期获取同步存储空间中新增的同步数据。

将新增的同步数据对应的匹配标识与目标数据库中的每一条数据对应的匹配标识进行匹配处理。以确定新增的同步数据是否为目标同步数据。匹配标识包括新增的同步数据的数据主键及变更后的数据本体。

根据目标同步数据中对应的操作标识，将目标同步数据中对应的数据主键及变更后的数据本体同步至目标数据库中。

匹配处理包括如下步骤：

当新增的同步数据的操作标识为删除操作标识，且存在同步数据的匹配标识与目标数据库中的一条数据的匹配标识相同时，将新增的同步数据确定为目标同步数据。

当同步数据的操作标识为修改操作标识或增加操作标识，且同步数据的匹配标识与目标数据库中的每一条数据的匹配标识均不相同时，将新增的同步数据确定为目标同步数据。

根据本发明的第二个方面，提供了一种非瞬时性计算机可读存储介质，非瞬时性计算机可读存储介质存储有计算机程序，计算机程序被处理器执行时实现上述的一种基于canal的数据库双向同步方法。

根据本发明的第三个方面，提供了一种电子设备，包括存储器、处理器以及存储在存储器中并可在处理器上运行的计算机程序，处理器执行计算机程序时实现上述的一种基于canal的数据库双向同步方法。

本发明至少具有以下有益效果：