[发明专利]一种数据迁移方法及系统、存储介质、电子设备在审
| 申请号: | 202110778574.1 | 申请日: | 2018-07-10 |
| 公开(公告)号: | CN113553313A | 公开(公告)日: | 2021-10-26 |
| 发明(设计)人: | 许哲 | 申请(专利权)人: | 创新先进技术有限公司 |
| 主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/27 |
| 代理公司: | 北京晋德允升知识产权代理有限公司 11623 | 代理人: | 刘立升 |
| 地址: | 开曼群岛大开曼岛乔治镇医院路*** | 国省代码: | 暂无信息 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 数据 迁移 方法 系统 存储 介质 电子设备 | ||
1.一种数据迁移方法,包括:
将老数据库通过数据仓库同步工具进行数据同步,生成第一数据版本;以及清空新数据库内数据;
通过数据仓库同步工具回流第一数据版本或数据补丁至新数据库,通过数据仓库同步工具将新数据库数据同步至数据仓库,生成第二数据版本;
对比所述第一数据版本与所述第二数据版本的数据差异,若存在差异,则生成数据补丁;若不存在差异,则无数据补丁生成;
判断是否存在数据补丁,若存在数据补丁,则跳转至数据回流,若不存在数据补丁,则数据迁移完成。
2.如权利要求1所述的一种数据迁移方法,回流第一数据版本或数据补丁至新数据库前,判断是否存在第二数据版本或第二数据版本中是否存在数据;若不存在第二数据版本或第二数据版本中不存在数据,则回流第一数据版本至新数据库;若存在第二数据版本或第二数据版本中存在数据,则回流数据补丁至新数据库。
3.如权利要求1所述的一种数据迁移方法,采用Map Reduce原理将数据补丁生成任务分解成若干处理逻辑相同的任务单元,将处理完成后的所述任务单元合并输出最终结果集,得到数据补丁。
4.如权利要求3所述的一种数据迁移方法,所述数据差异采用离线数据仓库通过行级逐字段比对生成。
5.如权利要求3所述的一种数据迁移方法,所述数据补丁通过数据仓库执行SQL脚本生成。
6.如权利要求3所述的一种数据迁移方法,清空新数据库内数据通过删除并新建表的方式或者直接清空表数据的方式实现。
7.一种数据迁移方法,包括:
将老数据库数据同步至数据仓库并清理新数据库的数据;其中,所述老数据库数据为第一数据版本的数据;
将所述数据仓库的所述第一数据版本的数据同步至所述新数据库;
将新数据库数据同步至所述数据仓库;
对比所述数据仓库的所述第一数据版本的数据与由所述新数据库最新同步来的数据是否存在数据差异;
若不存在数据差异,则数据迁移完成。
8.如权利要求7所述的方法,每次对比所述数据仓库的所述第一数据版本的数据与由所述新数据库最新同步来的数据是否存在数据差异后,若所述数据仓库的所述第一数据版本的数据与由所述新数据库最新同步来的数据存在数据差异,则生成数据补丁,并将最新生成的数据补丁同步至所述新数据库;将所述新数据库最新的数据同步至所述数据仓库,对比所述数据仓库的所述第一数据版本的数据与由所述新数据库最新同步来的数据是否存在数据差异。
9.如权利要求8所述的方法,每次对比所述数据仓库的所述第一数据版本的数据与由所述新数据库最新同步来的数据是否存在数据差异后,若所述数据仓库的所述第一数据版本的数据与由所述新数据库最新同步来的数据不存在数据差异,则数据迁移完成。
10.如权利要求8所述的方法,生成数据补丁包括:采用Map Reduce原理将数据补丁生成任务分解成若干处理逻辑相同的任务单元,将处理完成后的任务单元合并输出最终结果集,得到数据补丁。
11.如权利要求7所述的方法,清理新数据库的数据通过删除并新建表的方式或者直接清空表数据的方式实现。
12.如权利要求8至11中任一项所述的方法,所述数据补丁是每次对比所述数据仓库的所述第一数据版本的数据与由所述新数据库最新同步来的数据存在数据差异后,根据所述数据仓库的所述第一数据版本的数据与由所述新数据库最新同步来的数据存在的数据差异生成的。
13.一种电子设备,包括存储器,处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现权利要求1-12任一项方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于创新先进技术有限公司,未经创新先进技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110778574.1/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





