[发明专利]数据迁移方法、装置、计算机设备及存储介质在审
| 申请号: | 202210037709.3 | 申请日: | 2022-01-13 |
| 公开(公告)号: | CN114385595A | 公开(公告)日: | 2022-04-22 |
| 发明(设计)人: | 姜雷 | 申请(专利权)人: | 平安付科技服务有限公司 |
| 主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/27 |
| 代理公司: | 深圳市精英专利事务所 44242 | 代理人: | 武志峰 |
| 地址: | 518000 广东省深圳市福田区福田*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据 迁移 方法 装置 计算机 设备 存储 介质 | ||
本申请涉及数据处理技术领域,揭露一种数据迁移方法、装置、计算机设备及存储介质,其中方法包括将账户信息对应的数据进行打标分库,得到初始分库值,并将初始分库值分为临时分库值和目标分库值;构建目标分库和临时分库,并构建源端数据库与目标分库之间数据链路;再将目标分库值对应的数据从源端数据库同步到目标分库中;当检测到账户号发生变更信息时,获取变更分库值,并将变更分库值转换成临时分库值;当目标分库值对应的数据同步完成时,将临时数据同步到临时分库中。本申请还涉及区块链技术,账户信息存储于区块链中。本申请避免因为分库标记值的变动,所造成数据迁移的出错,有利于提高数据迁移的可靠性。
技术领域
本申请涉及数据处理技术领域,尤其涉及一种数据迁移方法、装置、计算机设备及存储介质。
背景技术
OGG软件是一种基于数据库日志的结构化数据复制软件,其能够实现数据的实时捕捉、变换和投递,实现源端数据库与目标分库的数据同步,保持亚秒级的数据延迟。并支持按条件对数据进行策略迁移(按不同条件做不同迁移策略)。
基于上述特性在分库拆分的时候可以按照不同的迁移策略将数据迁移到对应的目标库中。当前OGG仅支持对单一表进行固定策略迁移,无法按照某一规则将整个业务域的数据进行迁移,另外当已迁移的数据在源库规则条件值发生表更,OGG在应用变更日志的时候会因为新值在对应的新库中不存在而失败,OGG异常终止,从而导致数据的迁移可靠性较低。现亟需一种能够提高数据迁移可靠性的方法。
发明内容
本申请实施例的目的在于提出一种数据迁移方法、装置、计算机设备及存储介质,以提高数据迁移的可靠性。
为了解决上述技术问题,本申请实施例提供一种数据迁移方法,包括:
在源端数据库中,基于账户信息,生成分库值标记,并根据所述分库值标记,将所述账户信息对应的数据进行打标分库,得到初始分库值,以及将所述分库值标记对应的初始分库值作为临时分库值,将除所述临时分库值以外的分库值对应的初始分库值作为目标分库值;
构建所述目标分库值对应的目标分库,以及构建所述临时分库值对应的临时分库,并构建所述源端数据库与所述目标分库之间数据链路,得到目标数据链路;
根据数据同步命令,获取所述目标分库值对应的数据,并基于所述目标数据链路,将所述目标分库值对应的数据从所述源端数据库同步到所述目标分库中;
当检测到所述账户号发生变更信息时,获取所述账户号发生变更信息对应的初始分库值,作为变更分库值,并将所述变更分库值转换成所述临时分库值;
当所述目标分库值对应的数据同步完成时,基于所述临时分库值,构建所述源端数据库与所述临时分库之间数据链路,得到临时数据链路;
基于所述临时数据链路,将所述临时分库值对应的数据,从所述源端数据库同步到所述临时分库中。
为了解决上述技术问题,本申请实施例提供一种数据迁移装置,包括:
初始分库值生成模块,用于在源端数据库中,基于账户信息,生成分库值标记,并根据所述分库值标记,将所述账户信息对应的数据进行打标分库,得到初始分库值,以及将所述分库值标记对应的初始分库值作为临时分库值,将除所述临时分库值以外的分库值对应的初始分库值作为目标分库值;
目标数据链路构建模块,用于构建所述目标分库值对应的目标分库,以及构建所述临时分库值对应的临时分库,并构建所述源端数据库与所述目标分库之间数据链路,得到目标数据链路;
第一数据同步模块,用于根据数据同步命令,获取所述目标分库值对应的数据,并基于所述目标数据链路,将所述目标分库值对应的数据从所述源端数据库同步到所述目标分库中;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安付科技服务有限公司,未经平安付科技服务有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210037709.3/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





