[发明专利]一种基于大数据的智能化数据迁移方法及装置在审
申请号: | 202211708705.X | 申请日: | 2022-12-29 |
公开(公告)号: | CN116431564A | 公开(公告)日: | 2023-07-14 |
发明(设计)人: | 高科;陈翅俊;刘德道;邢小龙;赵铭;林镇锋;周海;刘兆平;田松林 | 申请(专利权)人: | 南方电网数字平台科技(广东)有限公司 |
主分类号: | G06F16/11 | 分类号: | G06F16/11;G06F16/182;G06F11/14;G06F21/64 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 江银会 |
地址: | 518053 广东省深圳市南山区沙河街道高*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 数据 智能化 迁移 方法 装置 | ||
1.一种基于大数据的智能化数据迁移方法,其特征在于,所述方法包括:
确定待迁移的源数据以及所述源数据对应的数据迁移需求;
根据所述数据迁移需求和所述源数据,确定将所述源数据迁移至目标数据库所需的目标资源;
根据所述数据迁移需求和所述目标资源,确定数据迁移方案;
根据所述数据迁移方案,执行数据迁移试运行操作,所述数据迁移试运行操作用于测试所述数据迁移方案的可行性;
根据所述数据迁移方案和所述数据迁移试运行操作的执行情况,对所述源数据执行数据迁移操作。
2.根据权利要求1所述的基于大数据的智能化数据迁移方法,其特征在于,所述目标资源包括所述源数据迁移至所述目标数据库时所需的所述目标数据库的容量、迁移所述源数据所需的软件资源和硬件资源;
所述根据所述数据迁移需求和所述源数据,确定数据迁移所需的目标资源,包括:
根据所述数据迁移需求和所述源数据,确定所述源数据的迁移数据量级;
判断所述迁移数据量级是否大于预设数据量级;
当判断出所述迁移数据量级大于所述预设数据量级时,根据所述迁移数据量级,对所述目标数据库进行扩容,以使所述目标数据库的扩容后容量能够满足所述迁移数据量级;
根据所述数据迁移需求,申请迁移所述源数据所需的软件资源和硬件资源。
3.根据权利要求2所述的基于大数据的智能化数据迁移方法,其特征在于,在所述根据所述数据迁移需求和所述源数据,确定将所述源数据迁移至目标数据库所需的目标资源之前,所述方法还包括:
确定所述源数据所需迁移至的目标数据库;
以及,所述确定所述源数据所需迁移至的目标数据库,包括:
确定所述源数据的数据类型,所述源数据的数据类型为关系类型或非关系类型;
当所述源数据的数据类型为关系类型时,确定所述源数据所需迁移至的目标数据库为关系型数据库;
当所述源数据的数据类型为非关系类型时,确定所述源数据所需迁移至的目标数据库为非关系型数据库;
或者,
确定所述源数据的数据应用场景;
根据所述源数据的数据应用场景,确定所述源数据所需迁移至的目标数据库,所述目标数据库为事务型数据库或分析型数据库。
4.根据权利要求1所述的基于大数据的智能化数据迁移方法,其特征在于,在所述根据所述数据迁移需求和所述源数据,确定将所述源数据迁移至目标数据库所需的目标资源之后,所述方法还包括:
根据所述数据迁移需求,判断是否需要对所述源数据进行数据备份,所述数据备份用于在所述源数据在迁移至目标数据库时保护所述源数据的数据完整性;
当判断出需要对所述源数据进行数据备份时,将所述源数据备份至第一备份数据库;
其中,所述源数据包括源数据库主数据、元数据、源数据库日志数据、数据流数据、内存数据、技术组件中用于存储数据的文件和目录。
5.根据权利要求1所述的基于大数据的智能化数据迁移方法,其特征在于,在所述根据所述数据迁移需求和所述目标资源,确定数据迁移方案之前,所述方法还包括:
确定数据迁移影响因素,所述数据迁移影响因素用于表示降低所述源数据迁移至所述目标数据库的效率的因素;
判断所述目标资源中是否存在所述数据迁移影响因素;
当判断出所述目标资源中存在所述数据迁移影响因素时,将所述目标资源中的所述数据迁移影响因素删除;
当判断出所述目标资源中不存在所述数据迁移影响因素时,触发执行所述根据所述数据迁移需求和所述目标资源,确定数据迁移方案的操作。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南方电网数字平台科技(广东)有限公司,未经南方电网数字平台科技(广东)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211708705.X/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置