[发明专利]确定条带一致性的方法及装置在审

专利信息
申请号: 201911141650.7 申请日: 2019-11-20
公开(公告)号: CN112825052A 公开(公告)日: 2021-05-21
发明(设计)人: 陈亮;董如良;张进毅;刘强;袁琦钊 申请(专利权)人: 华为技术有限公司
主分类号: G06F11/10 分类号: G06F11/10
代理公司: 北京中博世达专利商标代理有限公司 11274 代理人: 申健
地址: 518129 广东*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 确定 条带 一致性 方法 装置
【说明书】:

本申请实施例提供一种确定条带一致性的方法及装置,涉及计算机技术领域,能够降低确定条带一致性所消耗网络资源。该方法包括:运算节点获取目标条带对应的n组CRC数据块;该目标条带包含n个第一数据块,该n个第一数据块包括k个原始数据块和k个原始数据块的m个EC数据块;该n组CRC数据块为n组第二数据块各自的CRC数据块;一组第二数据块包括对一个第一数据块进行m次EC变换得到的m个变换结果;其中,k与m均为正整数,n=m+k;并且运算节点确定n组CRC数据块是否满足线性关系;若n组CRC数据块满足线性关系,则运算节点确定目标条带具有条带一致性。

技术领域

本申请实施例涉及计算机技术领域,尤其涉及一种确定条带一致性的方法及装置。

背景技术

纠删码(erasure code,EC)技术可以应用于数据存储系统,是一种能够减少数据冗余、保证数据可靠性的数据编码方法。

具体的,在存储系统中,对于k个数据块,首先采用EC算法生成该k个数据块的m个校验数据块(其中,k与m均为大于或者等于1的正整数,k与m的大小关系不作限定),如此,得到k+m个数据块,然后将k+m个数据块存储到数据存储系统的不同的系统节点(如硬盘)中,这k+m个数据块构成一个完整的编码码字(以下称为一个条带),并且这k+m个数据块满足条带一致性,即k+m个数据块中可以容忍任意t(1≤t≤m)个数据块丢失,保证数据可恢复。

目前,确定存储系统中的条带是否具有一致性的方法可以包括:将k+m个数据块从不同的系统节点汇聚到一个运算节点,假设k个数据块分别为D0~Dk-1,m个校验数据块分别为P0~Pm-1,运算节点对该k个数据块D0~Dk-1,采用EC算法确定出对应的m个校验数据块然后运算节点分别对校验数据块Pi与校验数据块进行逐字节比对,若Pi与相同,则确定D0~Dk-1和P0~Pm-1构成的条带具有条带一致性;否则,该条带不具有条带一致性。

然而,上述确定条带一致性的方法中,将条带中的所有数据块从各个系统节点汇聚到一个运算节点,若条带包括的数据块比较多,则需要消耗较大的网络带宽,从而可能影响数据存储系统的整体性能。

发明内容

本申请实施例提供一种确定条带一致性的方法及装置,能够降低确定条带一致性所消耗网络资源。

为达到上述目的,本申请实施例采用如下技术方案:

第一方面,本申请实施例提供一种确定条带一致性的方法,该方法包括:

运算节点获取目标条带对应的n组循环冗余校验(cyclic redundancy check,CRC)数据块;该目标条带包含n个第一数据块,该n个第一数据块包括k个原始数据块和k个原始数据块的m个EC数据块;该n组CRC数据块为n组第二数据块各自的CRC数据块;其中,在所述n组第二数据块中的一组第二数据块包括对相应的一个第一数据块进行m次EC变换得到的m个变换结果;其中,k与m均为正整数,n=m+k;并且运算节点确定n组CRC数据块是否满足线性关系;若n组CRC数据块满足线性关系,则运算节点确定目标条带具有条带一致性。

本申请实施例提供的确定条带一致性的方法,运算节点通过确定目标条带对应的n组CRC数据块是否满足线性关系,以确定该目标条带是否具有条带一致性。由于CRC数据块远小于目标条带包含的第一数据块的大小,运算节点从系统节点获取目标条带对应的CRC数据块,能够降低带宽消耗,并且由于CRC数据块较小,运算节点根据CRC数据块确定目标条带是否具有条带一致性,能够降低运算节点的计算量,降低资源消耗。综上,本申请实施例提供的确定条带一致性的方法能够降低确定条带一致性所消耗的网络资源。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201911141650.7/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top