[发明专利]一种损坏条带的处理方法及装置有效
申请号: | 201710419968.1 | 申请日: | 2017-06-06 |
公开(公告)号: | CN109002253B | 公开(公告)日: | 2021-06-04 |
发明(设计)人: | 曹力;陈伟;丁智勇 | 申请(专利权)人: | 杭州海康威视数字技术股份有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F11/10 |
代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 项京;马敬 |
地址: | 310051 浙*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 损坏 条带 处理 方法 装置 | ||
本申请实施例提供了一种损坏条带的处理方法及装置,方法包括:元数据服务器将损坏条带的条带信息发送给存储服务器,损坏条带的条带信息包括正常块的标识和异常块的标识,异常块的标识对应的数据块为坏块;存储服务器将异常块的标识对应的数据块中存储的数据置为预设数据,对正常块的标识对应的数据块和异常块的标识对应的数据块重新进行EC计算,获得预设个数目标校验块的校验数据,预设个数为一条带中包括的校验块的个数,根据正常块的标识和异常块的标识对应的数据块以及目标校验块,构建与损坏条带的标识相同的新正常条带。应用本申请实施例,使得损坏条带对应的正常数据块再损坏时,该再损坏的正常数据块中存储的流式数据能够被修复和读取。
技术领域
本申请涉及数据处理技术领域,特别是涉及一种损坏条带的处理方法及装置。
背景技术
随着互联网的普及与发展,用户数据(如视频数据)越来越多,在人类生活中起着的作用越来越重要。为节约本地客户端的存储空间,人们常常将用户数据存储至存储服务器的网络硬盘(IP(Internet Protocol,网络协议)硬盘)。
目前,一般采用EC(Erasure Code,纠删码)将用户数据存储至存储服务器。具体为,参考图1所示条带,一个条带中可以对应多个条带块,如图1中N+M个条带块,其中,一部分条带块(如图1中N个条带块)作为数据块存储用户数据,另一部分条带块(如图1中M个条带块)作为校验块存储校验数据,校验块中存储的校验数据是对数据块中存储的用户数据进行EC计算得到的。当条带对应的数据块损坏(下称为“坏块”),导致该坏块中的用户数据丢失时,可以根据校验块中的校验数据进行EC计算,修复该坏块中存储的用户数据。
现有技术中,基于EC修复条带对应的坏块中存储的用户数据,需要该条带对应的坏块的个数不大于该条带对应的校验块的个数;若该条带对应的坏块的个数大于该条带对应的校验块的个数,则无法修复该条带对应的坏块中存储的用户数据,此时,该条带可以确定为损坏条带。这种情况下,若损坏条带对应的正常数据块(下称为“正常块”)中再出现损坏的正常块时,该再损坏的正常块中存储的用户数据将无法被修复,也就无法读取到该再损坏的正常块中存储的用户数据。
发明内容
本申请实施例的目的在于提供一种损坏条带的处理方法及装置,以使得损坏条带对应的正常块再损坏时,该再损坏的正常块中存储的用户数据能够被修复和读取。具体技术方案如下:
一方面,本申请实施例公开了一种损坏条带的处理方法,应用于存储服务器,所述方法包括:
从元数据服务器获取损坏条带的条带信息;所述损坏条带的条带信息包括:正常块的标识和异常块的标识;所述异常块的标识对应的数据块为坏块;
将所述异常块的标识对应的数据块中存储的数据置为预设数据;
对所述正常块的标识对应的数据块和所述异常块的标识对应的数据块中存储的数据重新进行纠删码EC计算,获得预设个数目标校验块的校验数据;所述预设个数为一条条带中包括的校验块的个数;
根据所述正常块的标识对应的数据块、所述异常块的标识对应的数据块以及所述预设个数目标校验块,构建与所述损坏条带的标识相同的新正常条带。
可选的,所述从元数据服务器获取损坏条带的条带信息的步骤,包括:
接收元数据服务器发送的包括损坏条带的条带信息的重新计算校验数据任务;所述重新计算校验数据任务为所述元数据服务器根据重新计算校验数据任务列表中包括的所述损坏条带的标识生成的。
可选的,在构建与所述损坏条带的标识相同的新正常条带之后,所述方法还包括:
向所述元数据服务器发送删除消息;所述删除消息用于指示所述元数据服务器删除所述重新计算校验数据任务以及所述重新计算校验数据任务列表中包括的所述损坏条带的标识。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州海康威视数字技术股份有限公司,未经杭州海康威视数字技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710419968.1/2.html,转载请声明来源钻瓜专利网。