[发明专利]一种存储数据的方法及装置有效

专利信息
申请号: 201610078319.5 申请日: 2016-02-03
公开(公告)号: CN105760245B 公开(公告)日: 2019-03-26
发明(设计)人: 宋飞;刘强;罗治文 申请(专利权)人: 华为技术有限公司
主分类号: G06F11/07 分类号: G06F11/07;G06F11/14;G06F16/174;H04L29/08
代理公司: 北京中博世达专利商标代理有限公司 11274 代理人: 申健
地址: 518129 广东*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 存储 数据 方法 装置
【说明书】:

发明实施例公开了一种存储数据的方法及装置,涉及通信技术领域,能够解决因备份节点占用空间较大而造成磁盘空间不足的问题。本发明实施例的方法包括:至少两个备份节点接收主节点发送的原始数据,原始数据为主节点写入的数据;当至少两个备份节点写入原始数据之后,至少两个备份节点按照每个备份节点对应的数据压缩模式压缩原始数据,得到目标数据,目标数据占用的存储空间小于原始数据占用的存储空间;至少两个备份节点删除原始数据。本发明适用于数据的存储过程。

技术领域

本发明涉及通信技术领域,尤其涉及一种存储数据的方法及装置。

背景技术

在分布式存储系统中,通常包括若干个计算节点和存储节点,并且计算节点和存储节点可以通过网络连接起来。为了避免因存储节点故障而造成数据丢包,在数据存储的过程中,通常将同一份数据的多个副本分别保存在多个存储节点上。比如:将数据备份3份,并保存在不同的存储节点上,从而确保当其中1份或2份损坏时,仍能够保证数据的完整性。

在数据读取过程中,读取数据的请求可以通过网络向主节点发送,并从主节点读取已保存的数据,而备份节点上存储的数据在主节点不存在故障时,仅用于保存数据副本,也就是保存在备份节点上的数据与保存在主节点上的数据相同,且存储形式相同。因此,采用上述方式进行数据的存储,往往造成过多的冗余。当主节点不存在故障时,备份节点仅用于数据的备份,而当存储的数据量较大时,由于备份的数据与保存在主节点上的数据需要占用相同的存储空间,因此,导致因备份节点占用空间较大而造成磁盘空间不足的问题。

发明内容

本发明实施例提供一种存储数据的方法及装置,能够解决因备份节点占用空间较大而造成磁盘空间不足的问题。

为达到上述目的,本发明实施例采用如下技术方案:

第一方面,本发明实施例提供一种存储数据的方法,所述方法用于一种存储系统,所述存储系统包括至少两个备份节点和主节点,所述方法包括:

所述至少两个备份节点接收所述主节点发送的原始数据,所述原始数据为所述主节点写入的数据;

当所述至少两个备份节点写入所述原始数据之后,所述至少两个备份节点按照每个备份节点对应的数据压缩模式压缩所述原始数据,得到目标数据,所述目标数据占用的存储空间小于所述原始数据占用的存储空间;

所述至少两个备份节点删除所述原始数据。

结合第一方面,在第一方面第一种可能的实现方式中,所述至少两个备份节点包括第一备份节点和第二备份节点,所述数据压缩模式包括第一模式或第二模式,所述目标数据包括第一目标数据或第二目标数据,将所述第一目标数据恢复成所述原始数据的时间小于将所述第二目标数据恢复成所述原始数据的时间,所述至少两个备份节点按照每个备份节点对应的数据压缩模式压缩所述原始数据,得到目标数据,包括:

所述第一备份节点按照所述第一模式,压缩所述原始数据,得到所述第一目标数据,以便于当所述主节点接收到读取所述原始数据的请求消息,且所述主节点写入的所述原始数据无法被读取时,所述第一备份节点优先将所述第一目标数据恢复成所述原始数据;

所述第二备份节点按照所述第二模式,压缩所述原始数据,得到所述第二目标数据。

结合第一方面第一种可能的实现方式,在第一方面第二种可能的实现方式中,所述第一模式包括快速压缩算法,所述第二模式包括高压缩率算法,将所述原始数据压缩成所述第一目标数据的时间小于将所述原始数据压缩成所述第二目标数据的时间,所述第一目标数据占用的存储空间大于所述第二目标数据。

结合第一方面,或第一方面第一至第二种可能中的任一项实现方式,在第一方面第三种可能的实现方式中,所述存储系统还包括终端,所述至少两个备份节点接收所述主节点发送的原始数据,包括:

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201610078319.5/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top