[发明专利]一种数据库历史数据自动归档系统在审
申请号: | 201910859487.1 | 申请日: | 2019-09-11 |
公开(公告)号: | CN110569232A | 公开(公告)日: | 2019-12-13 |
发明(设计)人: | 王文;易翔;罗淋;柳松 | 申请(专利权)人: | 宝付网络科技(上海)有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/242;G06F11/14;G06F11/30 |
代理公司: | 31330 上海海钧知识产权代理事务所(特殊普通合伙) | 代理人: | 姜波 |
地址: | 200231 上海市*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 历史数据 数据库 归档系统 数据库查询接口 历史数据备份 数据校验模块 处理模块 归档模块 归档数据 碎片整理 巡检模块 自动故障 封装 自动化 | ||
本发明提供了一种数据库历史数据自动归档系统,其特征在于,包括历史数据备份模块、历史数据归档模块、表碎片整理模块、数据校验模块、数据库查询接口模块、数据库巡检模块、自动故障处理模块。AutoArchive数据库历史数据自动归档系统通过Auto Archive的封装,实现其自动化归档数据。
技术领域
本发明涉及计算机技术领域,尤其涉及一种AutoArchive数据库历史数据自动归档系统。
背景技术
现有的percona-toolkit工具无法实现自动化归档数据,也无法根据业务定制归档规则。通过Auto Archive的封装,实现其自动化,并可以在AutoArchive中自定义业务规则。
发明内容
本发明所要解决percona-toolkit工具无法实现自动化归档数据,也无法根据业务定制归档规则的问题,提供一种AutoArchive数据库历史数据自动归档系统。
为解决上述技术问题,本发明采用的技术方案是:
本发明提供一种数据库历史数据自动归档系统,包括七个模块;
历史数据备份模块:对数据进行备份;
历史数据归档模块:对归档后的数据进行备份;
表碎片整理模块:对数据库表的物理空间进行释放;
数据校验模块:在数据同步完成后,需要校验数据同步后结果集进行校验;
数据库查询接口模块:提供常用数据库查询功能;
数据库巡检模块:巡检数据库服务器硬盘信息;
自动故障处理模块:在数据库故障时给出可执行性方案。
进一步地,所述数据库历史数据自动归档系统历史数据备份模块是通过调用mydumper工具组件进行数据备份。
进一步地,所述数据库历史数据自动归档系统历史数据归档模块由表结构同步、表数据归档、表数据校验、原表数据清理、邮件通知功能点组成。
进一步地,所述数据库历史数据自动归档系统表碎片整理模块是通过调用ghost工具对数据库表的物理空间进行释放;数据归档完毕后,及时释放物理空间,提升磁盘空间和提高数据库性能。
进一步地,所述数据库历史数据自动归档系统数据校验模块可以对比任意两张表数据是否一致;在数据同步完成后,需要校验数据同步后结果的一致性。
进一步地,所述数据库历史数据自动归档系统数据库查询接口包括进程、数据库状态、数据库用户、数据库空间、主从同步等信息。
进一步地,所述数据库历史数据自动归档系统数据库巡检模块主要是巡检数据库服务器硬盘信息,统计剩余空间和每日数据增量,评估磁盘可使用时长,并以报表的方式进行展示。
进一步地,所述数据库历史数据自动归档系统自动故障处理模块是通过对故障信息、binlog日志、error日志、进程收集汇总,然后与自定义解决方案进行匹配,给出解决方案。
本发明还公开了一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1数据库历史数据自动归档系统所。
本发明还公开了一种装置/终端设备,其特征在于,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序所述处理器执行所述计算机程序时实现如权利要求1所述数据库历史数据自动归档系统所。
本发明通过Auto Archive的封装,实现其自动化,并可以在AutoArchive中自定义业务规则。该系统方案具特点如下:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于宝付网络科技(上海)有限公司,未经宝付网络科技(上海)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910859487.1/2.html,转载请声明来源钻瓜专利网。
- 上一篇:数据迁移方法、装置、设备和介质
- 下一篇:一种热点数据的管理方法、装置及系统