[发明专利]基于分布式云存储的数据备份和即时访问的系统及方法在审
申请号: | 202011391518.4 | 申请日: | 2020-12-01 |
公开(公告)号: | CN112612411A | 公开(公告)日: | 2021-04-06 |
发明(设计)人: | 肖雷 | 申请(专利权)人: | 北京亿智云科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F16/13 |
代理公司: | 北京纽乐康知识产权代理事务所(普通合伙) 11210 | 代理人: | 刘艳艳 |
地址: | 100032 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 分布式 存储 数据 备份 即时 访问 系统 方法 | ||
本发明公开了一种基于分布式云存储的数据备份和即时访问的系统及方法,该系统包括块存储数据读模块、数据分片模块、元数据信息管理模块、对象存储认证模块、对象存储数据读写模块、分片数据组织模块以及块/对象存储协议转换模块。本发明的基于分布式云存储的数据备份和即时访问的系统及方法通过将备份数据分片保存到分布式云存储中,利用分布式云存储的多副本安全机制保证了备份数据的安全性;按照业务数据的原始格式分片存储在分布式云存储中,并通过组织元数据实现即时访问备份数据内容,大幅缩短备份数据准备时间;能够利用不同形式的云存储实现备份、恢复和即时数据访问。
技术领域
本发明涉及企业信息化开放平台的数据安全技术领域,具体来说,涉及一种基于分布式云存储的数据备份和即时访问的系统及方法。
背景技术
对象存储即分布式云存储的通称,每个信息块都有唯一的url访问地址,通过https协议安全访问,且都具有多个副本,其特点是没有最大数据空间的限制,安全可靠,但随机读写性能较块存储低。块存储是服务器读取和存储信息格式,其特点是读写速度快,但有最大存储空间限制。
现有数据安全领域中,备份的数据都是以打包成大文件的形式存储在磁带或磁盘中,当需要访问备份数据的内容时,首先要准备足够的存储空间,然后将打包的备份数据解包到目标存储中,这个过程就是传统的数据恢复过程。由于需要读取和写入全部的备份数据,因此时间和存储的消耗都与备份的数据量成正比,以10TB的备份数据,恢复速度300MB/s为列,需要准备至少10TB的存储空间,且全部恢复就需要9.7小时。如果使用分布式云存储,现有备份技术需要先将打包的备份数据文件从分布式云存储中复制到本地存储,然后再解包恢复到目标存储上,同样以10TB的备份数据,恢复速度300MB/s为例,需要准备至少20TB的空间和19.4小时的恢复时间。
发明内容
为了解决数据访问和恢复的效率问题,本发明提出一种基于分布式云存储的数据备份和即时访问的系统及方法,能够克服现有技术的上述不足。
为实现上述技术目的,本发明的技术方案是这样实现的:
一种基于分布式云存储的数据备份和即时访问的系统,包括块存储数据读模块、数据分片模块、元数据信息管理模块、对象存储认证模块、对象存储数据读写模块、分片数据组织模块以及块/对象存储协议转换模块,其中,
所述块存储数据读模块,用于读取块存储数据,并将读取的数据传送给所述数据分片模块;
所述数据分片模块,用于将所述块存储数据读模块读取的数据按照分布式云存储提供的空间大小进行分片,且为了保证数据不被篡改,需要通过多种哈西算法记录每个分片数据的多个数据分片指纹,并向所述元数据信息管理模块传送所述分片数据及所述分片数据的数据分片指纹;
所述元数据信息管理模块,用于记录每个分片数据地址、指纹与原始块数据的对应关系,并向所述对象存储认证模块传送分片数据;
所述对象存储认证模块,用于实现分布式云对象存储的安全认证,并向所述对象存储数据读写模块传送分片数据;
所述对象存储数据读写模块,用于多进程并行读写分布式云存储中的分片数据(即对象存储数据);
所述分片数据组织模块,用于根据每个分片数据地址、指纹与原始块数据的对应关系将所述对象存储数据读写模块读取的分布式云存储中的分片数据重新组织成块存储数据的格式,并将重新组织成的块存储数据传送给所述块/对象存储协议转换模块;
所述块/对象存储协议转换模块,用于将分布式云存储的数据重新组织成的块存储数据通过块存储协议映射给对应的服务器。
进一步地,所述对象存储数据读写模块由对象存储数据读模块和对象存储数据写模块组成。
进一步地,所述对象存储认证模块支持https协议和标准安全认证证书。
根据本发明的另一方面,提供了一种基于分布式云存储的数据备份和即时访问的方法,该方法包括以下步骤:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京亿智云科技有限公司,未经北京亿智云科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011391518.4/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种复合型电力管道
- 下一篇:一种具有密封结构便于收纳的电力测量设备
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置