[发明专利]基于分布式数据库的数据备份方法及其系统在审
| 申请号: | 201310595338.1 | 申请日: | 2013-11-21 |
| 公开(公告)号: | CN103810060A | 公开(公告)日: | 2014-05-21 |
| 发明(设计)人: | 杨艳杰;刘臻 | 申请(专利权)人: | 北京奇虎科技有限公司;奇智软件(北京)有限公司 |
| 主分类号: | G06F11/14 | 分类号: | G06F11/14;G06F17/30 |
| 代理公司: | 北京国昊天诚知识产权代理有限公司 11315 | 代理人: | 许志勇 |
| 地址: | 100088 北京市西城区新*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 基于 分布式 数据库 数据 备份 方法 及其 系统 | ||
技术领域
本发明涉及数据库应用技术领域,尤其是一种基于分布式数据库的数据备份方法及其系统。
背景技术
MongoDB是一种基于分布式文件存储的数据库,能够为WEB应用提供可扩展的高性能数据存储解决方案。
Mongodb拥有众多优点,已经被越来越多的企业用于重要的生产环境中。在这种情况下,数据的备份是至关重要的。Mongodb提供数据备份功能,主要工作原理为:将数据库中oplog.rs(更新日志记录库)中的所有数据完整导出到本地文件以json形式进行存放。
但是,现有技术中的分布式数据库的数据备份方案存在下列缺点:
(1)每一次备份都需要将数据完整地导出,导致消耗大量磁盘读写资源,并且反复完整导出会存在大量重复数据,浪费服务器磁盘空间。
(2)只能够将数据导出为一个文件,如果数据量较大,那么将产生一个很大的文件,导致占用较大的存储空间。
(3)无法进行实时流备份,最新的数据得不到及时的备份,因此灾难后数据很难恢复到完整状态。
发明内容
本发明的主要目的在于提供一种基于分布式数据库的数据备份方法及其系统,以解决现有技术中存在的分布式数据库的完整的数据备份导致消耗大量磁盘读写资源以及浪费磁盘空间的技术问题。
为解决上述问题,根据本发明的一个方面提供一种数据备份方法,包括:设置数据备份开始时间点和备份停止时间点;确定数据备份开始时间点和备份停止时间点之间的数据,并对确定的数据进行备份。
其中,所述对确定的数据进行备份的步骤包括:设置备份文件大小阈值;将确定的数据按照顺序导入至多个备份文件,其中,每个备份文件大小不大于所述备份文件大小阈值。
其中,所述方法还包括:监控所述分布式数据库的更新日志文件,判断所述更新日志文件是否被写入信息;若是则对写入信息对应的数据进行数据备份。
其中,所述方法还包括:生成时间戳标记文件,将所述更新日志文件被写入信息的时间信息记录至所述时间戳标记文件。
其中,所述方法还包括:当重新开始进行数据备份时,根据所述时间戳标记文件确定上一次终止的时间位置继续进行数据备份。
根据本发明的另一个方面提供一种数据备份系统,包括:设置模块,用于设置数据备份开始时间点和备份停止时间点;数据备份模块,用于确定数据备份开始时间点和备份停止时间点之间的数据,并对确定的数据进行备份。
其中,所述数据备份模块包括:阈值设置模块,用于设置备份文件大小阈值;数据导入模块,用于将确定的数据按照顺序导入至多个备份文件,其中,每个备份文件大小不大于所述备份文件大小阈值。
其中,所述系统还包括:监控模块,用于监控所述分布式数据库的更新日志文件;判断模块,用于判断所述更新日志文件是否被写入信息,若是则所述数据备份模块对写入信息对应的数据进行数据备份。
其中,所述系统还包括:生成模块,用于生成时间戳标记文件;时间记录模块,用于将所述更新日志文件被写入信息的时间信息记录至所述时间戳标记文件。
其中,当所述数据备份模块重新开始进行数据备份时,根据所述时间戳标记文件确定上一次终止的时间位置继续进行数据备份。
根据本发明的技术方案,通过设置数据备份开始时间点和备份停止时间点,并备份时间起止点之间的数据,能够实现按需进行数据备份,从而节省磁盘读写资源,并节约磁盘空间。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,而可依照说明书的内容予以实施,并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂,以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本发明的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1是根据本发明一个实施例的数据备份方法的流程图;
图2是根据本发明另一实施例的数据备份方法的流程图;
图3是根据本发明实施例的实时流备份方法的流程图;
图4是根据本发明一个实施例的数据备份系统的结构框图;
图5是根据本发明另一实施例的数据备份系统的结构框图;
图6是根据本发明再一实施例的数据备份系统的结构框图。
具体实施方式
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇虎科技有限公司;奇智软件(北京)有限公司,未经北京奇虎科技有限公司;奇智软件(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201310595338.1/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





