[发明专利]一种基于表结构关系的数据同步方法及装置

说明书

本发明公开了一种基于表结构关系的数据同步方法及装置，包括：第一系统获取第二系统针对第二数据库的日志记录；针对任一日志记录，根据关联关系配置，确定日志记录中第一数据表为第一子表或第一父表，得到与第一子表或第一父表具有关联关系的第二数据表；其中，关联关系配置包括第二数据库中存在关联关系的数据表和存在关联关系的数据表中的关联字段名，基于日志记录对第一数据表进行数据同步；并基于日志记录中的关联字段名的信息，对第二数据表进行数据同步。从而实现通过一个日志记录，确定出与日志记录的第一数据表存在关联关系的第二数据表，以此提升第一系统确待更改的第二数据表的全面性，体现出了表结构关系，提升数据同步的效率。

技术领域

本发明涉及金融科技(Fintech)领域，尤其涉及一种基于表结构关系的数据同步方法及装置。

背景技术

随着计算机技术的发展，越来越多的技术(例如：区块链、云计算或大数据)应用在金融领域，传统金融业正在逐步向金融科技转变，大数据技术也不例外，但由于金融、支付行业的安全性、实时性要求，也对大数据技术中索引方法提出了更高的要求。

目前，第一系统所生成的索引与第二系统内的数据表是相对应的关系，即一个数据表对应一个索引，在第二系统对应的第二数据库中，在数据表的数据发生变化时，第二数据库会产生日志记录，如二进制日志，即binlog日志，也就是说，一个日志记录相当于一个binlog日志，为了使第一系统的第一数据库和第二系统的第二数据库的数据保持一致，第二系统会将binlog日志发送至第一系统，以使第一系统根据binlog日志，将第一数据库的数据表进行对应更改。

但是，因为一个数据表对应一个索引，所以一个binlog日志只能更改第一数据库中一个数据表，无法通过一个binlog日志将第一数据库中在结构上，与binlog日志记录的数据表存在关联关系的所有数据表进行更改，因此无法体现出数据库中表结构关系。例如，binlog日志中包括数据表信息a(如表名)、字段名b(如“用户名”)和语句指令c(将用户名“张*”修改为“李*”)，若在第一系统中包括两个数据表A和B均包括字段名b，则无法通过一个binlog日志对两张表A和B中字段名b的字段值c对应更改，只能将binlog日志对应索引的表(如binlog日志对应索引的表为A)进行更改。

综上所述，现有技术未能体现出数据库中表结构关系，第一系统在索引时不够全面，需要多个binlog日志完成索引的表的更改，在保证第一系统和第二系统所对应的数据库的数据保持一致性时效率低，资源消耗大，因此，现需要一种索引方法，可以实现根据一个binlog日志，将第一数据库中与日志记录存在关联关系的数据表进行更改，提升第一系统和第二系统所对应的数据库的数据保持一致性的效率。

发明内容

本发明实施例提供一种基于表结构关系的数据同步方法及装置，用于实现根据一个日志记录，将第一数据库中与日志记录存在关联关系的数据表进行更改，体现出表结构关系，提升数据同步的效率。

第一方面，本发明实施例提供一种基于表结构关系的数据同步方法，包括：

第一系统获取第二系统针对第二数据库的日志记录；所述第一系统中的第一数据库与所述第二数据库通过索引方式关联数据表；

针对任一日志记录，所述第一系统确定关联关系配置中的存在关联关系的数据表中是否包含所述日志记录中的第一数据表；所述关联关系配置包括所述第二数据库中存在关联关系的数据表和存在关联关系的数据表中的关联字段名；

若包含，则所述第一系统根据所述关联关系配置确定所述日志记录中第一数据表为第一子表或第一父表，得到与所述第一子表或所述第一父表具有关联关系的第二数据表；

所述第一系统基于所述日志记录对所述第一数据库中的第一数据表进行数据同步；并基于所述日志记录中的关联字段名的信息，对所述第一数据库中的第二数据表进行数据同步。