[发明专利]数据迁移方法、装置、计算机设备及存储介质在审

专利信息
申请号: 202210037709.3 申请日: 2022-01-13
公开(公告)号: CN114385595A 公开(公告)日: 2022-04-22
发明(设计)人: 姜雷 申请(专利权)人: 平安付科技服务有限公司
主分类号: G06F16/21 分类号: G06F16/21;G06F16/27
代理公司: 深圳市精英专利事务所 44242 代理人: 武志峰
地址: 518000 广东省深圳市福田区福田*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 数据 迁移 方法 装置 计算机 设备 存储 介质
【说明书】:

本申请涉及数据处理技术领域,揭露一种数据迁移方法、装置、计算机设备及存储介质,其中方法包括将账户信息对应的数据进行打标分库,得到初始分库值,并将初始分库值分为临时分库值和目标分库值;构建目标分库和临时分库,并构建源端数据库与目标分库之间数据链路;再将目标分库值对应的数据从源端数据库同步到目标分库中;当检测到账户号发生变更信息时,获取变更分库值,并将变更分库值转换成临时分库值;当目标分库值对应的数据同步完成时,将临时数据同步到临时分库中。本申请还涉及区块链技术,账户信息存储于区块链中。本申请避免因为分库标记值的变动,所造成数据迁移的出错,有利于提高数据迁移的可靠性。

技术领域

本申请涉及数据处理技术领域,尤其涉及一种数据迁移方法、装置、计算机设备及存储介质。

背景技术

OGG软件是一种基于数据库日志的结构化数据复制软件,其能够实现数据的实时捕捉、变换和投递,实现源端数据库与目标分库的数据同步,保持亚秒级的数据延迟。并支持按条件对数据进行策略迁移(按不同条件做不同迁移策略)。

基于上述特性在分库拆分的时候可以按照不同的迁移策略将数据迁移到对应的目标库中。当前OGG仅支持对单一表进行固定策略迁移,无法按照某一规则将整个业务域的数据进行迁移,另外当已迁移的数据在源库规则条件值发生表更,OGG在应用变更日志的时候会因为新值在对应的新库中不存在而失败,OGG异常终止,从而导致数据的迁移可靠性较低。现亟需一种能够提高数据迁移可靠性的方法。

发明内容

本申请实施例的目的在于提出一种数据迁移方法、装置、计算机设备及存储介质,以提高数据迁移的可靠性。

为了解决上述技术问题,本申请实施例提供一种数据迁移方法,包括:

在源端数据库中,基于账户信息,生成分库值标记,并根据所述分库值标记,将所述账户信息对应的数据进行打标分库,得到初始分库值,以及将所述分库值标记对应的初始分库值作为临时分库值,将除所述临时分库值以外的分库值对应的初始分库值作为目标分库值;

构建所述目标分库值对应的目标分库,以及构建所述临时分库值对应的临时分库,并构建所述源端数据库与所述目标分库之间数据链路,得到目标数据链路;

根据数据同步命令,获取所述目标分库值对应的数据,并基于所述目标数据链路,将所述目标分库值对应的数据从所述源端数据库同步到所述目标分库中;

当检测到所述账户号发生变更信息时,获取所述账户号发生变更信息对应的初始分库值,作为变更分库值,并将所述变更分库值转换成所述临时分库值;

当所述目标分库值对应的数据同步完成时,基于所述临时分库值,构建所述源端数据库与所述临时分库之间数据链路,得到临时数据链路;

基于所述临时数据链路,将所述临时分库值对应的数据,从所述源端数据库同步到所述临时分库中。

为了解决上述技术问题,本申请实施例提供一种数据迁移装置,包括:

初始分库值生成模块,用于在源端数据库中,基于账户信息,生成分库值标记,并根据所述分库值标记,将所述账户信息对应的数据进行打标分库,得到初始分库值,以及将所述分库值标记对应的初始分库值作为临时分库值,将除所述临时分库值以外的分库值对应的初始分库值作为目标分库值;

目标数据链路构建模块,用于构建所述目标分库值对应的目标分库,以及构建所述临时分库值对应的临时分库,并构建所述源端数据库与所述目标分库之间数据链路,得到目标数据链路;

第一数据同步模块,用于根据数据同步命令,获取所述目标分库值对应的数据,并基于所述目标数据链路,将所述目标分库值对应的数据从所述源端数据库同步到所述目标分库中;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安付科技服务有限公司,未经平安付科技服务有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202210037709.3/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top