[发明专利]MongoDB数据库的备份、恢复方法、装置、电子设备及存储介质有效

专利信息
申请号: 202010196551.5 申请日: 2020-03-19
公开(公告)号: CN111488243B 公开(公告)日: 2023-07-07
发明(设计)人: 陈青松;李晓静;宫伯钊 申请(专利权)人: 北京金山云网络技术有限公司
主分类号: G06F11/14 分类号: G06F11/14;G06F16/17;G06F16/18;G06F16/182
代理公司: 北京博遵律师事务所 11761 代理人: 马佑平
地址: 100085 北京市*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: mongodb 数据库 备份 恢复 方法 装置 电子设备 存储 介质
【说明书】:

发明实施例公开了一种对MongoDB数据库的备份、恢复方法、装置、电子设备及计算机可读存储介质。该备份方法包括:获取第一时间戳;以第一时间戳作为起始时间从MongoDB数据库中依次拉取多条数据库操作日志;将拉取的多条数据库操作日志分类得到数据定义语言操作日志和数据操纵语言操作日志,数据定义语言操作日志用于记录MongoDB数据库对应数据结构的变更,数据操纵语言操作日志用于记录MongoDB数据库对应数据的变更;以及将数据定义语言操作日志依次写入第一临时文件以生成第一文件,以及将数据操纵语言操作日志和数据定义语言操作日志依次写入第二临时文件以生成第二文件。本发明实施例可以将MongoDB数据库增量数据备份快速写入到文件中,降低数据备份所需的存储空间。

技术领域

本发明涉及云服务技术领域,尤其涉及一种对MongoDB数据库的备份、恢复方法、装置、电子设备及存储介质。

背景技术

MongoDB是一个基于分布式文件存储的数据库,为介于关系数据库和非关系数据库之间的产品,可以存储比较复杂的数据类型。对于MongoDB数据库来说MongoDB的数据是最核心的,因此数据的安全性和易迁移性也很关键。目前关于MongoDB全量数据备份有物理式备份支撑,也就是可以将MongoDB数据的整个文件夹进行复制实现。但是,MongoDB增量数据的备份以及恢复或者迁移的技术方案却一直没有特别理想的进展,然而全量备份需占用更多的存储空间。受限于MongoDB数据库内部数据库操作日志(Oplog)存储容量有限,目前亟需提出一种可将MongoDB增量数据进行备份及恢复的技术手段。

发明内容

本发明的目的在于提供一种对MongoDB数据库的备份、恢复方法、装置、电子设备及计算机可读存储介质,以增量备份数据到磁盘文件中,降低数据备份所需的存储空间。

根据本发明的第一方面,提供了一种对MongoDB数据库的备份方法包括:

获取第一时间戳;

以第一时间戳作为起始时间从MongoDB数据库中依次拉取多条数据库操作日志;

将拉取的多条数据库操作日志分类得到数据定义语言操作日志和数据操纵语言操作日志,所述数据定义语言操作日志用于记录所述MongoDB数据库对应数据结构的变更,所述数据操纵语言操作日志用于记录所述MongoDB数据库对应数据的变更;以及

将数据定义语言操作日志依次写入第一临时文件以生成第一文件,以及将数据操纵语言操作日志和数据定义语言操作日志依次写入第二临时文件以生成第二文件。

可选的,获取第一时间戳包括:

在初次启动所述MongoDB数据库操作日志的拉取操作时,指定的初始化时间为第一时间戳并记录到配置文件中;以及

从配置文件中获取第一时间戳。

可选的,获取第一时间戳包括:

在所述MongoDB数据库操作日志的拉取操作停止后再次启动时,以停止时已经写入到第一临时文件或第二临时文件中的最后一条数据库操作日志的时间戳为第一时间戳并记录到断点文件中;以及

再次启动时从断点文件中获取第一时间戳。

可选的,所述方法还包括:

在将拉取的多条所述数据库操作日志分类得到数据定义语言操作日志和数据操纵语言操作日志之后,将数据定义语言操作日志发送到一个第一队列;

将数据操纵语言操作日志分发给多个第二队列;以及

将所述数据定义语言操作日志发送到所述多个第二队列。

可选的,生成所述第一文件包括:

从所述第一队列中拉取数据定义语言操作日志并写入第一临时文件;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京金山云网络技术有限公司,未经北京金山云网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202010196551.5/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top