[发明专利]一种数据归档方法及装置有效
申请号: | 201811013947.0 | 申请日: | 2018-08-31 |
公开(公告)号: | CN110928883B | 公开(公告)日: | 2023-05-09 |
发明(设计)人: | 刘映球;杨飚;李晓哲;倪峻;吴钢;狄学农 | 申请(专利权)人: | 上海汽车集团股份有限公司 |
主分类号: | G06F16/23 | 分类号: | G06F16/23;G06F16/27;G06F16/25 |
代理公司: | 北京信远达知识产权代理有限公司 11304 | 代理人: | 魏晓波 |
地址: | 201203 上海市浦东新区*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 归档 方法 装置 | ||
1.一种数据归档方法,其特征在于,包括:
确定源库中待归档的源表;
采用数据实时复制技术实现所述源表与目标库中目标表的实时数据同步;
获取所述源库预部署的过期数据删除脚本、配置表、作业表和中间表,并对所述过期数据删除脚本的删除操作进行过滤;其中,所述过期数据删除脚本包括作业生成脚本和作业执行脚本,所述配置表记录有过期数据删除策略,所述中间表中记录有所述源表的删除辅助数据;
运行所述作业生成脚本,以使所述作业生成脚本按照所述过期数据删除策略处理所述源表得到删除作业并保存至所述作业表中;
运行所述作业执行脚本,以使所述作业执行脚本扫描所述作业表中的所述删除作业并利用所述删除辅助数据执行。
2.根据权利要求1所述的方法,其特征在于,所述采用数据实时复制技术实现源表与目标库中目标表的实时数据同步之前,所述方法还包括:
创建针对所述源库的归档账户,并为所述归档账户赋予权限。
3.根据权利要求1所述的方法,其特征在于,所述采用数据实时复制技术实现源表与目标库中目标表的实时数据同步之前,所述方法还包括:
在所述源表处于未分区状态的情况下,对所述目标表进行分区。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在检测到所述作业执行脚本运行完成的情况下,输出用于表征数据归档完成的提示信息。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在检测到所述作业执行脚本运行完成的情况下,对所述源表执行shrink操作。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在检测到所述作业执行脚本运行未完成的情况下,获取并更新所述删除作业的运行进度和运行状态。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在检测到所述作业生成脚本/所述作业执行脚本运行中断的情况下,获取并记录所述作业生成脚本/所述作业执行脚本的运行错误信息。
8.根据权利要求1所述的方法,其特征在于,所述运行所述作业生成脚本之前,所述方法还包括:
通过第一定时任务调度所述作业生成脚本;
所述运行所述作业执行脚本之前,所述方法还包括:
通过第二定时任务调度所述作业执行脚本。
9.一种数据归档装置,其特征在于,包括:
确定模块,用于确定源库中待归档的源表;
同步模块,用于采用数据实时复制技术实现所述源表与目标库中目标表的实时数据同步;
获取过滤模块,用于获取所述源库预部署的过期数据删除脚本、配置表、作业表和中间表,并对所述过期数据删除脚本的删除操作进行过滤;其中,所述过期数据删除脚本包括作业生成脚本和作业执行脚本,所述配置表记录有过期数据删除策略,所述中间表中记录有所述源表的删除辅助数据;
第一运行模块,用于运行所述作业生成脚本,以使所述作业生成脚本按照所述过期数据删除策略处理所述源表得到删除作业并保存至所述作业表中;
第二运行模块,用于运行所述作业执行脚本,以使所述作业执行脚本扫描所述作业表中的所述删除作业并利用所述删除辅助数据执行。
10.根据权利要求9所述的装置,其特征在于,所述装置还包括:
创建模块,用于创建针对所述源库的归档账户,并为所述归档账户赋予权限。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海汽车集团股份有限公司,未经上海汽车集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811013947.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种眼底图像定量分析的前置处理方法及存储设备
- 下一篇:水上滑板装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置