[发明专利]一种存储数据的方法及装置有效
| 申请号: | 201610078319.5 | 申请日: | 2016-02-03 |
| 公开(公告)号: | CN105760245B | 公开(公告)日: | 2019-03-26 |
| 发明(设计)人: | 宋飞;刘强;罗治文 | 申请(专利权)人: | 华为技术有限公司 |
| 主分类号: | G06F11/07 | 分类号: | G06F11/07;G06F11/14;G06F16/174;H04L29/08 |
| 代理公司: | 北京中博世达专利商标代理有限公司 11274 | 代理人: | 申健 |
| 地址: | 518129 广东*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 存储 数据 方法 装置 | ||
本发明实施例公开了一种存储数据的方法及装置,涉及通信技术领域,能够解决因备份节点占用空间较大而造成磁盘空间不足的问题。本发明实施例的方法包括:至少两个备份节点接收主节点发送的原始数据,原始数据为主节点写入的数据;当至少两个备份节点写入原始数据之后,至少两个备份节点按照每个备份节点对应的数据压缩模式压缩原始数据,得到目标数据,目标数据占用的存储空间小于原始数据占用的存储空间;至少两个备份节点删除原始数据。本发明适用于数据的存储过程。
技术领域
本发明涉及通信技术领域,尤其涉及一种存储数据的方法及装置。
背景技术
在分布式存储系统中,通常包括若干个计算节点和存储节点,并且计算节点和存储节点可以通过网络连接起来。为了避免因存储节点故障而造成数据丢包,在数据存储的过程中,通常将同一份数据的多个副本分别保存在多个存储节点上。比如:将数据备份3份,并保存在不同的存储节点上,从而确保当其中1份或2份损坏时,仍能够保证数据的完整性。
在数据读取过程中,读取数据的请求可以通过网络向主节点发送,并从主节点读取已保存的数据,而备份节点上存储的数据在主节点不存在故障时,仅用于保存数据副本,也就是保存在备份节点上的数据与保存在主节点上的数据相同,且存储形式相同。因此,采用上述方式进行数据的存储,往往造成过多的冗余。当主节点不存在故障时,备份节点仅用于数据的备份,而当存储的数据量较大时,由于备份的数据与保存在主节点上的数据需要占用相同的存储空间,因此,导致因备份节点占用空间较大而造成磁盘空间不足的问题。
发明内容
本发明实施例提供一种存储数据的方法及装置,能够解决因备份节点占用空间较大而造成磁盘空间不足的问题。
为达到上述目的,本发明实施例采用如下技术方案:
第一方面,本发明实施例提供一种存储数据的方法,所述方法用于一种存储系统,所述存储系统包括至少两个备份节点和主节点,所述方法包括:
所述至少两个备份节点接收所述主节点发送的原始数据,所述原始数据为所述主节点写入的数据;
当所述至少两个备份节点写入所述原始数据之后,所述至少两个备份节点按照每个备份节点对应的数据压缩模式压缩所述原始数据,得到目标数据,所述目标数据占用的存储空间小于所述原始数据占用的存储空间;
所述至少两个备份节点删除所述原始数据。
结合第一方面,在第一方面第一种可能的实现方式中,所述至少两个备份节点包括第一备份节点和第二备份节点,所述数据压缩模式包括第一模式或第二模式,所述目标数据包括第一目标数据或第二目标数据,将所述第一目标数据恢复成所述原始数据的时间小于将所述第二目标数据恢复成所述原始数据的时间,所述至少两个备份节点按照每个备份节点对应的数据压缩模式压缩所述原始数据,得到目标数据,包括:
所述第一备份节点按照所述第一模式,压缩所述原始数据,得到所述第一目标数据,以便于当所述主节点接收到读取所述原始数据的请求消息,且所述主节点写入的所述原始数据无法被读取时,所述第一备份节点优先将所述第一目标数据恢复成所述原始数据;
所述第二备份节点按照所述第二模式,压缩所述原始数据,得到所述第二目标数据。
结合第一方面第一种可能的实现方式,在第一方面第二种可能的实现方式中,所述第一模式包括快速压缩算法,所述第二模式包括高压缩率算法,将所述原始数据压缩成所述第一目标数据的时间小于将所述原始数据压缩成所述第二目标数据的时间,所述第一目标数据占用的存储空间大于所述第二目标数据。
结合第一方面,或第一方面第一至第二种可能中的任一项实现方式,在第一方面第三种可能的实现方式中,所述存储系统还包括终端,所述至少两个备份节点接收所述主节点发送的原始数据,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201610078319.5/2.html,转载请声明来源钻瓜专利网。
- 上一篇:感抗、容抗演示装置
- 下一篇:一种地漏辅助清理装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





