[发明专利]基于GoldenGate的数据同步校验方法有效
申请号: | 201710930786.0 | 申请日: | 2017-10-09 |
公开(公告)号: | CN107609188B | 公开(公告)日: | 2020-08-11 |
发明(设计)人: | 程永新;林小勇;黎君原 | 申请(专利权)人: | 上海新炬网络信息技术股份有限公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F16/21;G06F16/22;G06F16/23 |
代理公司: | 上海科律专利代理事务所(特殊普通合伙) 31290 | 代理人: | 袁亚军;金碎平 |
地址: | 200000 上海市青浦区外青*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 goldengate 数据 同步 校验 方法 | ||
1.一种基于GoldenGate的数据同步校验方法,分别在源端和目标端部署GoldenGate软件,其特征在于,包括如下步骤:
S1:在Oracle GoldenGate的源端,记录完整的前映像信息;
S2:在Oracle GoldenGate的目标端创建GoldenGate变更表,采用四个字段分别记录:表名、记录数增量、哈希值增量和源端提交数据的SCN值;
S3:正式迁移前作一次全量的数据校验,并记录全量的数据校验对应的源端SCN,记录信息到GoldenGate全量哈希表中;
S4:正式迁移期间,源端发起全量的数据校验,目标端记录基于GoldenGate全量哈希表、GoldenGate变更表以及当前的SCN值推算出当前的哈希值;
所述步骤S2中目标端复制进程增量MAP策略,基于每条DML操作进行如下处理:
a.针对insert记录,记录数增量为1,哈希增量为此记录拼凑结果的哈希值;
b.针对update记录的前映像,记录数增量为0,哈希值增量为此记录拼凑结果的哈希值乘以-1;
c. 针对update记录的后映像,记录数增量为0,哈希值增量为此记录拼凑结果的哈希值乘以1;
d.针对delete记录的后映像,记录数增量为-1,哈希值增量为此记录拼凑结果的哈希值乘以1。
2.如权利要求1所述的基于GoldenGate的数据同步校验方法,其特征在于,所述步骤S1包括:配置GoldenGate中记录数据删除前的值的参数NOCOMPRESSDELETES以及NOCOMPRESSUPDATES,并采用数据库日志信息完整记录同步范围内的表的所有操作记录。
3.如权利要求1所述的基于GoldenGate的数据同步校验方法,其特征在于,所述源端和目标端部署GoldenGate软件包括如下步骤:
向ogguser用户授权允许连接访问数据库,开启数据库最小附加日志,并创建管理进程mgr,该进程用于管理后续创建的抽取、投递和复制进程;
配置抽取进程、投递进程以及复制进程。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海新炬网络信息技术股份有限公司,未经上海新炬网络信息技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710930786.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:自动售书机
- 下一篇:纺织面料(2017‑5)
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置