[发明专利]一种基于表结构关系的数据同步方法及装置在审
申请号: | 202110697388.5 | 申请日: | 2021-06-23 |
公开(公告)号: | CN113326266A | 公开(公告)日: | 2021-08-31 |
发明(设计)人: | 林中昱;江旻;杨杨;范增虎;阮泽文;刘啸;王凯曦;杨海辉 | 申请(专利权)人: | 深圳前海微众银行股份有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/27 |
代理公司: | 北京同达信恒知识产权代理有限公司 11291 | 代理人: | 宋正伟 |
地址: | 518027 广东省深圳市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 结构 关系 数据 同步 方法 装置 | ||
1.一种基于表结构关系的数据同步方法,其特征在于,包括:
第一系统获取第二系统针对第二数据库的日志记录;所述第一系统中的第一数据库与所述第二数据库通过索引方式关联数据表;
针对任一日志记录,所述第一系统确定关联关系配置中的存在关联关系的数据表中是否包含所述日志记录中的第一数据表;所述关联关系配置包括所述第二数据库中存在关联关系的数据表和存在关联关系的数据表中的关联字段名;
若包含,则所述第一系统根据所述关联关系配置确定所述日志记录中第一数据表为第一子表或第一父表,得到与所述第一子表或所述第一父表具有关联关系的第二数据表;
所述第一系统基于所述日志记录对所述第一数据库中的第一数据表进行数据同步;并基于所述日志记录中的关联字段名的信息,对所述第一数据库中的第二数据表进行数据同步。
2.如权利要求1所述的方法,其特征在于,若包含,则所述第一系统根据所述关联关系配置确定所述日志记录中第一数据表为第一子表或第一父表,得到与所述第一子表或所述第一父表具有关联关系的第二数据表,包括:
所述第一系统若确定所述存在关联关系的数据表中包含所述日志记录中的第一数据表,则确定所述日志记录中的字段名包含在所述存在关联关系的数据表中的关联字段名中;
所述第一系统根据所述字段名和所述存在关联关系的数据表中的关联字段名确定所述第一数据表为第一子表或第一父表;
所述第一系统根据所述第二数据库中存在关联关系的数据表确定与所述第一子表或所述第一父表具有关联关系的第二数据表。
3.如权利要求2所述的方法,其特征在于,所述第一系统根据所述第二数据库中存在关联关系的数据表确定与所述第一子表或所述第一父表具有关联关系的第二数据表,包括:
基于所述日志记录中的字段名,所述第一系统在确定所述第一数据表为所述第一子表时,根据所述第二数据库中存在关联关系的数据表确定所述第一子表的第二父表,将所述第二父表确定为第二数据表;
所述第一系统根据所述第二数据库中存在关联关系的数据表确定是否存在与所述第二父表具有关联关系的其他数据表,若存在,则将与所述第二父表具有关联关系的其他数据表确定为第二数据表;
所述第一系统在确定所述第一数据表为所述第一父表时,根据所述第二数据库中存在关联关系的数据表确定所述第一父表的第二子表,将所述第二子表确定为第二数据表;
所述第一系统根据所述第二数据库中存在关联关系的数据表确定是否存在与所述第二子表具有关联关系的其他数据表,若存在,则将与所述第二子表具有关联关系的其他数据表确定为第二数据表。
4.如权利要求1所述的方法,其特征在于,所述关联关系配置是通过如下方式得到的,包括:
所述第一系统接收所述第二系统发送的配置文件;所述配置文件是所述第二系统根据所述第二数据库中各数据表之间的关联关系和所述第二数据库中各数据表的关联字段名确定的;其中,若所述第二数据库中的第三数据表的主键字段为所述第二数据库中的第四数据表的字段时,则确定所述第三数据表与所述第四数据表之间存在关联关系,并将所述主键字段确定为所述第四数据表的关联字段名;
所述第一系统根据所述配置文件确定所述关联关系配置。
5.如权利要求4所述的方法,其特征在于,所述配置文件是所述第二系统通过第一建模工具确定所述第二数据库中各数据表的关系图;或
所述第二系统通过第二建模工具确定的所述第二数据库中各数据表的关系代码;或
所述第二系统根据所述各数据表之间的关联关系、所述各数据表的关联字段名和文件生成工具确定的关系表格。
6.如权利要求1所述的方法,其特征在于,所述第一系统基于所述日志记录对所述第一数据库中的第一数据表进行数据同步之前,还包括:
将所述日志记录存储于缓存队列中;
基于所述日志记录中的关联字段名的信息,对所述第一数据库中的第二数据表进行数据同步之前,还包括:
从所述缓存队列中获取预设数量的所述日志记录。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳前海微众银行股份有限公司,未经深圳前海微众银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110697388.5/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置