[发明专利]MongoDB数据库的备份、恢复方法、装置、电子设备及存储介质有效
| 申请号: | 202010196551.5 | 申请日: | 2020-03-19 |
| 公开(公告)号: | CN111488243B | 公开(公告)日: | 2023-07-07 |
| 发明(设计)人: | 陈青松;李晓静;宫伯钊 | 申请(专利权)人: | 北京金山云网络技术有限公司 |
| 主分类号: | G06F11/14 | 分类号: | G06F11/14;G06F16/17;G06F16/18;G06F16/182 |
| 代理公司: | 北京博遵律师事务所 11761 | 代理人: | 马佑平 |
| 地址: | 100085 北京市*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | mongodb 数据库 备份 恢复 方法 装置 电子设备 存储 介质 | ||
本发明实施例公开了一种对MongoDB数据库的备份、恢复方法、装置、电子设备及计算机可读存储介质。该备份方法包括:获取第一时间戳;以第一时间戳作为起始时间从MongoDB数据库中依次拉取多条数据库操作日志;将拉取的多条数据库操作日志分类得到数据定义语言操作日志和数据操纵语言操作日志,数据定义语言操作日志用于记录MongoDB数据库对应数据结构的变更,数据操纵语言操作日志用于记录MongoDB数据库对应数据的变更;以及将数据定义语言操作日志依次写入第一临时文件以生成第一文件,以及将数据操纵语言操作日志和数据定义语言操作日志依次写入第二临时文件以生成第二文件。本发明实施例可以将MongoDB数据库增量数据备份快速写入到文件中,降低数据备份所需的存储空间。
技术领域
本发明涉及云服务技术领域,尤其涉及一种对MongoDB数据库的备份、恢复方法、装置、电子设备及存储介质。
背景技术
MongoDB是一个基于分布式文件存储的数据库,为介于关系数据库和非关系数据库之间的产品,可以存储比较复杂的数据类型。对于MongoDB数据库来说MongoDB的数据是最核心的,因此数据的安全性和易迁移性也很关键。目前关于MongoDB全量数据备份有物理式备份支撑,也就是可以将MongoDB数据的整个文件夹进行复制实现。但是,MongoDB增量数据的备份以及恢复或者迁移的技术方案却一直没有特别理想的进展,然而全量备份需占用更多的存储空间。受限于MongoDB数据库内部数据库操作日志(Oplog)存储容量有限,目前亟需提出一种可将MongoDB增量数据进行备份及恢复的技术手段。
发明内容
本发明的目的在于提供一种对MongoDB数据库的备份、恢复方法、装置、电子设备及计算机可读存储介质,以增量备份数据到磁盘文件中,降低数据备份所需的存储空间。
根据本发明的第一方面,提供了一种对MongoDB数据库的备份方法包括:
获取第一时间戳;
以第一时间戳作为起始时间从MongoDB数据库中依次拉取多条数据库操作日志;
将拉取的多条数据库操作日志分类得到数据定义语言操作日志和数据操纵语言操作日志,所述数据定义语言操作日志用于记录所述MongoDB数据库对应数据结构的变更,所述数据操纵语言操作日志用于记录所述MongoDB数据库对应数据的变更;以及
将数据定义语言操作日志依次写入第一临时文件以生成第一文件,以及将数据操纵语言操作日志和数据定义语言操作日志依次写入第二临时文件以生成第二文件。
可选的,获取第一时间戳包括:
在初次启动所述MongoDB数据库操作日志的拉取操作时,指定的初始化时间为第一时间戳并记录到配置文件中;以及
从配置文件中获取第一时间戳。
可选的,获取第一时间戳包括:
在所述MongoDB数据库操作日志的拉取操作停止后再次启动时,以停止时已经写入到第一临时文件或第二临时文件中的最后一条数据库操作日志的时间戳为第一时间戳并记录到断点文件中;以及
再次启动时从断点文件中获取第一时间戳。
可选的,所述方法还包括:
在将拉取的多条所述数据库操作日志分类得到数据定义语言操作日志和数据操纵语言操作日志之后,将数据定义语言操作日志发送到一个第一队列;
将数据操纵语言操作日志分发给多个第二队列;以及
将所述数据定义语言操作日志发送到所述多个第二队列。
可选的,生成所述第一文件包括:
从所述第一队列中拉取数据定义语言操作日志并写入第一临时文件;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京金山云网络技术有限公司,未经北京金山云网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010196551.5/2.html,转载请声明来源钻瓜专利网。





