[发明专利]一种定制并自动进行数据老化的方法在审
| 申请号: | 201911300202.7 | 申请日: | 2019-12-16 |
| 公开(公告)号: | CN111400275A | 公开(公告)日: | 2020-07-10 |
| 发明(设计)人: | 马睿;姚家健;柳遵梁;闻建霞 | 申请(专利权)人: | 杭州美创科技有限公司 |
| 主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/27 |
| 代理公司: | 杭州杭诚专利事务所有限公司 33109 | 代理人: | 尉伟敏 |
| 地址: | 310011 浙江省杭州市拱*** | 国省代码: | 浙江;33 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 定制 自动 进行 数据 老化 方法 | ||
本发明公开了一种定制并自动进行数据老化的方法,包括如下步骤:在不需要对生产数据库进行停机的情况下,本发明生产数据库保留保存时间不超过TC的数据,通过将生产数据库中超过保存时间TC的数据保存到历史数据库中,然后再根据迁移规则清除生产数据库上相应的数据,完成数据迁移。本发明具有如下有益效果:自动化实现历史数据迁移,保留一定年份的生产数据库历史数据;完成历史数据迁移后,可通过限制生产数据库的数据滞留量提高生产库的性能;迁移前生产数据库与历史数据库表结构自同步,能够实现父子表的数据迁移,能设置表数据保留时间,不影响生产业务正常运行,可修改对应基表配置信息。
技术领域
本发明涉及数据传输技术领域,尤其是涉及一种能够定时进行历史数据迁移,不影响生产业务运行,提高生产库性能,的定制并自动进行数据老化的方法。
背景技术
Oracle数据库是现在使用最多的数据库之一,Oracle数据库支持数据的逻辑迁移,物理迁移。
现在的企业的业务数据库所能提供的用于数据迁移的停机时间并不长,甚至有些迁移需要在业务运行时进行,且不能影响业务的正常运作。
当用户需要将生产库的历史数据迁移至另外的数据库即历史库时,传统的逻辑迁移与物理迁移都会对生产库的生产业务产生影响,需要先进行测试,再申请生产库的停机时间,进行数据迁移。且难以实现定期的数据迁移,对于历史库中数据的保留时间到后的数据删除,还需要对历史数据库另行设定。
发明内容
本发明为了克服现有技术中存在的难以实现定期数据迁移,数据进行迁移时需要业务的暂停,或者在业务运行时迁移会影响业务的运行,以及迁移完成后对数据保留时间的处理的不足,提供了一种能够定时进行历史数据迁移,不影响生产业务运行,提高生产库性能,的定制并自动进行数据老化的方法。
为了实现上述目的,本发明采用了以下技术方案:
一种定制并自动进行数据老化的方法,包括如下步骤:
(1-1)设置数据的保存时间TC和数据迁移的时间间隔ΔTQ;
(1-2)每次数据迁移结束时,计时器置0,重新开始计时,时间间隔用ΔT表示,如果ΔT=ΔTQ,确定生产数据库中需要迁移的表之间的父子关系,
如果需要迁移的表之间具有父子关系,获得父表的时间字段和关联字段,获得子表的关联字段,转入步骤(1-3);
如果需要迁移的表之间不具有父子关系,需要迁移的表为单一表,获得单一表的时间字段,转入步骤(1-3);
其中,需要迁移的表为数据保存时间大于TC的表;
(1-3)搭建历史数据库,创建相同的用户和表结构,仅保留主键和索引,配置数据迁移的基础表格;
(1-4)检查生产数据库是否有delete触发器,如果有delete触发器,关闭delete触发器,转入步骤(1-5),如果没有delete触发器,转入步骤(1-5);
(1-5)运行脚本,进行生产数据库和历史数据库之间的数据迁移;
(1-6)验证数据迁移是否完成,如果没有完成,转入步骤(1-5)。
在不需要对生产数据库进行停机的情况下,本发明生产数据库保留保存时间不超过TC的数据,通过将生产数据库中超过保存时间TC的数据保存到历史数据库中,然后再根据迁移规则清除生产数据库上相应的数据,减少生产数据库的数据量,加快生产库的业务响应速度。
作为优选,步骤(1-5)到步骤(1-6)的具体步骤如下:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州美创科技有限公司,未经杭州美创科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911300202.7/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





