[发明专利]一种数据库间数据同步的方法、系统及设备

说明书

技术领域

本发明涉及计算机领域，尤其涉及一种数据库间数据同步的方法、系统及 设备。

背景技术

数据库以其数据存储、备份等数据功能，成为信息系统中必不可少的基础 设施之一，任何一个大型的信息系统都需要依靠数据库而存在。

在实际应用中，由于业务逻辑的复杂性和功能的模块化设计，往往一个信 息系统中会部署多套数据库，而这多套数据库之间需要协同合作共享数据，这 就要求各数据库之间能够实现数据同步。目前的主流数据同步技术包括Oracle 的Streams，Sybase的Replication Server等，其基本原理都是抓取源数据库中 数据库日志(redolog)文件中的逻辑变化记录(Logical Change Record，LCR)， 然后到目的数据库上按照LCR发生的顺序分别应用抓取的LCR，从而实现目 的数据库与源数据库的数据同步。

在上述数据库之间的数据同步方式中，源数据库与目的数据库不仅使用的 同步消息的内容是类似的，且各自传递同步消息的格式也必须是通用的，才能 进行数据的同步。应用在实际的同步过程中，由于源数据库和目的数据库支持 的同步消息的格式不一定相同，甚至于源数据库和目的数据库的版本和架构的 不同，导致数据同步的架构不灵活，源数据库和目的数据库之间可能无法正确 实现数据同步。

综上所述，在目前的数据库同步方式下，存在源数据库和目的数据库支持 的同步消息的格式不通用，导致源数据库和目的数据库之间数据同步失败的问 题。

发明内容

本发明实施例提供一种数据库间数据同步的方法、系统及设备，用以解决 现有技术中存在的由于源数据库和目的数据库支持的同步消息的格式不通用， 导致源数据库和目的数据库之间数据同步失败的问题。

一种数据库间数据同步的方法，所述方法包括以下步骤：

得到源数据库中进行数据操作后生成的逻辑变化记录LCR，其中，得到的 LCR是所述源数据库中对至少一个事务操作后生成的LCR；

针对同一事务操作生成的LCR，分配以该事务的事务ID表示的数据缓存 区；

从具有相同事务ID的LCR中确定出数据操作DML类型的LCR，事务控 制类型的LCR，并根据确定出的LCR类型对具有相同事务ID的LCR进行处 理，以得到需要进行数据同步的LCR；

针对得到的每一个LCR，判断LCR数据缓存池中是否存在与得到的LCR 具有相同关键字的LCR；

若不存在，则将所述得到的LCR存入所述LCR数据缓存池；否则，将具 有相同关键字的LCR进行归并，并将归并后的LCR存入所述LCR数据缓存 池；

将存入所述LCR数据缓存池的LCR格式转换为标准格式；

检测目的数据库支持的LCR格式，并将转换为标准格式的LCR再次转换 为目的数据库支持的格式后，发送给目的数据库。

一种数据库间数据同步设备，所述设备包括：

收集模块，用于得到源数据库中进行数据操作后生成的逻辑变化记录 LCR，其中，得到的LCR是所述源数据库中对至少一个事务操作后生成的LCR；

事务缓存模块，用于针对同一事务操作生成的LCR，分配以该事务的事务 ID表示的数据缓存区；

从具有相同事务ID的LCR中确定出数据操作DML类型的LCR，事务控 制类型的LCR，并根据确定出的LCR类型对具有相同事务ID的LCR进行处 理，以得到需要进行数据同步的LCR；

归并模块，用于针对每一个LCR，判断LCR数据缓存池中是否存在与得 到的LCR具有相同关键字的LCR，若不存在，则将所述得到的LCR存入所述 LCR数据缓存池；否则，将具有相同关键字的LCR进行归并，并将归并后的 LCR存入所述LCR数据缓存池；

应用模块，用于将存入所述LCR数据缓存池的LCR格式转换为标准格式； 检测目的数据库支持的LCR格式，并将转换为标准格式的LCR再次转换为目 的数据库支持的格式后，发送给目的数据库。

本发明实施例有益效果如下：