[发明专利]一种异构数据库中数据的同步方法

说明书

本发明公开了一种异构数据库中数据的同步方法，属于数据库技术领域，包括第一数据同步机制和第二数据同步机制，第一数据同步机制将原数据中预定范围的数据同步至目标数据库的过程中，检测第一数据同步机制的状态；第二数据同步机制用于第一数据同步机制的状态异常时，启用第二数据同步机制，以将源数据库中预定范围的数据同步至目标数据库；启用第二数据同步机制，包括：接收分布式资源管理平台推送的数据同步任务；数据同步任务包括数据恢复时间点及源数据库中的待同步数据库表的标识，检测第二数据同步机制的状态，解决了现有技术中数据同步机制因异常错误信息无法记录的问题的问题。

技术领域

本发明涉及数据库技术领域，更具体地说，涉及一种异构数据库中数据的同步方法。

背景技术

对于异构数据库，目前现有的数据同步手段可通过DRC(Data ReplicationCenter，数据同步中心)监听源数据库的binlog日志(这里的源数据库是基于mysql数据库技术)，然后通过消息将binlog日志发送到订阅端，订阅端拿到消息后生成相应的ETL(Extract Transform Loading，数据抽取转化装载规则)任务，然后基于ETL任务将数据同步到目标数据库中。

然而，一旦DRC异常(比如宕机)暂时无法自动恢复时，源数据库的增量数据则无法同步到目标数据库。由于增量数据未及时同步到目标数据库，往往也就丧失了其时效性，进而还可能影响基于该目标数据库的系统应用(比如系统无法及时向用户推送最新资讯)。

发明内容

针对现有技术的不足，本发明的目的在于提供一种异构数据库中数据的同步方法，解决了现有技术中数据同步机制因异常错误信息无法记录的问题的问题。

本发明的目的可以通过以下技术方案实现：

一种异构数据库的数据同步方法，包括以下步骤：

包括第一数据同步机制和第二数据同步机制，

第一数据同步机制将原数据中预定范围的数据同步至目标数据库的过程中，检测所述第一数据同步机制的状态；

第二数据同步机制用于第一数据同步机制的状态异常时，启用第二数据同步机制，以将所述源数据库中预定范围的数据同步至所述目标数据库；

所述启用第二数据同步机制，包括：

接收分布式资源管理平台推送的数据同步任务；所述数据同步任务包括数据恢复时间点及所述源数据库中的待同步数据库表的标识，检测所述第二数据同步机制的状态，检测第二数据同步机制的状态异常时，第二数据同步机制重新定时读取待同步数据库表中数据，并将第二数据同步机制的状态对第二数据同步机制作出标识；

根据所述待同步数据库表的标识，从该待同步数据库表中定时读取，其创建时间点晚于所述数据恢复时间点的所有数据放入临时列表，并将所述临时列表中的数据插入所述目标数据库中对应的数据库表；

所述定时读取接收到由调度中心定时发送的驱动消息时触发，每次触发读取范围为创建时间晚于上一次读取的截止时间的所有数据。

作为本发明的一种优选方案，所述定时读取检测第二数据同步机制的状态异常时，定时读取将已读取的数据存储在新建临时列表。

作为本发明的一种优选方案，所述新建临时列表的结构与异构数据库的列表相同。

作为本发明的一种优选方案，所述定时读取第二次检测第二数据同步机制的状态正常时，第二数据同步机制自动清空所述新建临时列表。

作为本发明的一种优选方案，在第二数据同步机制自动清空所述新建临时列表步骤前，第二数据同步机制将所述新建临时列表里全部内容转录至错误信息列表。

作为本发明的一种优选方案，所述错误信息列表由第二数据同步机制创建，所述错误信息列表的结构与异构数据库的列表相同。