[发明专利]数据增量同步方法、装置及终端设备

权利要求书

1.一种数据增量同步方法，其特征在于，包括：

接收源端数据库发送的多条增量日志；

从所述多条增量日志中提取DML操作涉及到的表数据，并基于所述表数据生成压缩日志，将压缩日志发送至各个目标端数据库；其中，压缩日志用于指示所述目标端数据库在判定所述压缩日志与其接收的查询请求匹配时发出第一请求，或者用于指示所述目标端数据库在接收到所述压缩日志预设时间后发出第二请求；

接收各个目标端数据库发送的第一请求或者第二请求，并根据接收到的所述第一请求或者所述第二请求确定各个目标端数据库对应的增量日志；

基于各个目标端数据库与源端数据库之间的预设映射关系对各个目标端数据库对应的增量日志进行转换，将转换后的增量日志发送至各个目标端数据库。

2.如权利要求1所述的数据增量同步方法，其特征在于，所述基于各个目标端数据库与源端数据库之间的预设映射关系对各个目标端数据库对应的增量日志进行转换，包括：

基于预存的源端数据库的日志解析文件对各个目标端数据库对应的增量日志进行解析，得到各个目标端数据库对应的表数据以及表数据的操作类型；

基于预存的目标端数据库对应的日志生成文件、各个目标端数据库对应的表数据以及表数据的操作类型生成各个目标端数据库对应的转换后的增量日志。

3.如权利要求1所述的数据增量同步方法，其特征在于，压缩日志携带有压缩日志编号；压缩日志用于指示所述目标端数据库从压缩日志中提取DML操作涉及到的表数据，若目标端数据库接收到的查询请求中包含所述DML操作涉及到的表数据，则判定压缩日志与其接收的查询请求匹配，并发出包含有压缩日志编号的第一请求；

相应的，在接收到第一请求时向对应的目标端数据库发送转换后的增量日志的方法为：

根据压缩日志编号确定增量同步的起始点；

根据增量同步的起始点确定第一请求对应的增量日志；

基于对应的目标端数据库与源端数据库之间的预设映射关系对第一请求对应的增量日志进行转换，将转换后的增量日志发送至对应的目标端数据库。

4.如权利要求3所述的数据增量同步方法，其特征在于，压缩日志编号的确定方法为：

对源端数据库发送的多条增量日志中的第一条增量日志进行解析，得到第一条增量日志中增量同步的起始点；

根据第一条增量日志中增量同步的起始点生成压缩日志编号。

5.如权利要求1所述的数据增量同步方法，其特征在于，压缩日志携带有压缩日志编号，第二请求中携带有压缩日志编号；

在接收到第二请求时向对应的目标端数据库发送转换后的增量日志的方法为：

根据压缩日志编号确定增量同步的起始点；

根据增量同步的起始点确定第二请求对应的增量日志；

基于对应的目标端数据库与源端数据库之间的预设映射关系对第二请求对应的增量日志进行转换，对转换后的增量日志进行压缩后将压缩后的增量日志发送至对应的目标端数据库。

6.如权利要求1所述的数据增量同步方法，其特征在于，在将转换后的增量日志发送至各个目标端数据库之前，还包括：

对转换后的增量日志进行优化处理，向对应的目标端数据库发送对应的优化处理后的增量日志；

所述优化处理指的是消除增量同步起始点至第一请求期间的相反操作、或消除增量同步起始点至第二请求期间的相反操作。