[发明专利]数据迁移方法、装置、计算机设备和可读存储介质在审
| 申请号: | 202111542880.1 | 申请日: | 2021-12-16 |
| 公开(公告)号: | CN114218193A | 公开(公告)日: | 2022-03-22 |
| 发明(设计)人: | 刘才福 | 申请(专利权)人: | 北京京东拓先科技有限公司 |
| 主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/23;G06F16/2455;G06F16/28 |
| 代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 孙静;刘芳 |
| 地址: | 100176 北京市经济技术*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据 迁移 方法 装置 计算机 设备 可读 存储 介质 | ||
本申请提供一种数据迁移方法、装置、计算机设备和可读存储介质,其中,该方法包括:响应于数据迁移指令,将第一数据库中的待迁移数据迁移至第二数据库,在第一数据库中的待迁移数据存在变更时,获取第一数据库中变更后的待迁移数据的第一标识信息、已迁移至第二数据库中的迁移数据的第二标识信息,根据变更后的待迁移数据、第一标识信息和第二标识信息,对已迁移至第二数据库中的迁移数据进行更新。该技术方案中,通过对第一数据库中的数据、第二数据库中的数据分别使用标识信息进行标识,在第一数据库每发生一次修改时,可以根据对比标识信息,准确的将每一次的修改数据同步更新到第二数据库中,提高数据迁移效果。
技术领域
本申请涉及互联网技术领域,尤其涉及一种数据迁移方法、装置、计算机设备和可读存储介质。
背景技术
在互联网应用开发的过程中,数据库在一开始可能是使用单表来存储数据,当单表的数据量越来越大时,数据的查询效率会越来越慢,此时就需要对原有数据进行迁移,将旧库中存储的数据迁移到新库中。
现有技术中,在进行数据迁移时,主要是利用一些迁移工具来实现历史数据的迁移和增量数据的同步。其过程主要是先定位到数据库的某个位置,然后从该位置开始读取数据,将历史数据刷到数据库中。在同步历史数据时,增量数据会先积压到消息队列(Message Queue,MQ)中,在同步完历史数据之后,再将MQ的所有积压数据进行泄洪。
但是,现有技术的这种方式由于MQ有可能会存在延迟,会导致一些存在互相依赖关系的复杂数据在迁移过程中产生混淆,造成数据迁移效果差。
发明内容
本申请提供一种数据迁移方法、装置、计算机设备和可读存储介质,用于解决现有数据迁移效果差的问题。
第一方面,本申请实施例提供一种数据迁移方法,包括:
响应于数据迁移指令,将第一数据库中的待迁移数据迁移至第二数据库;
在所述第一数据库中的待迁移数据存在变更时,获取所述第一数据库中变更后的待迁移数据的第一标识信息、已迁移至所述第二数据库中的迁移数据的第二标识信息;
根据所述变更后的待迁移数据、第一标识信息和第二标识信息,对已迁移至所述第二数据库中的迁移数据进行更新。
在第一方面的一种可能设计中,所述将第一数据库中的待迁移数据迁移至第二数据库,包括:
获取所述第一数据库中的待迁移数据的初始版本号;
根据预设第一迁移工具,将所述第一数据库中的待迁移数据复制至所述第二数据库,作为已迁移至所述第二数据库中的迁移数据;
将所述初始版本号作为已迁移至所述第二数据库中的迁移数据的第二标识信息。
在第一方面的另一种可能设计中,所述在所述第一数据库中的待迁移数据存在变更时,获取所述第一数据库中变更后的待迁移数据的第一标识信息,包括:
根据预设第二迁移工具对所述第一数据库进行监听;
在监听到所述第一数据库中的待迁移数据存在变更时,将所述第一数据库中的待迁移数据的初始版本号作为所述变更后的待迁移数据的第一标识信息。
在第一方面的再一种可能设计中,所述根据所述变更后的待迁移数据、第一标识信息和第二标识信息,对已迁移至所述第二数据库中的迁移数据进行更新,包括:
获取所述变更后的待迁移数据的同步标识字段的取值,所述同步标识字段的取值用于指示所述变更后的待迁移数据的来源;
在所述同步标识字段的取值与预设第一数值匹配时,将所述第一标识信息与所述第二标识信息进行对比;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东拓先科技有限公司,未经北京京东拓先科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111542880.1/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种实现教学管理和教学数据展示的信息化方法
- 下一篇:一种智能健康监测系统
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





