[发明专利]基于HDFS的SCSI容错优化方法及装置有效

专利信息
申请号: 201210018166.7 申请日: 2012-01-19
公开(公告)号: CN103220162A 公开(公告)日: 2013-07-24
发明(设计)人: 胡殿明;魏伟;王志谦 申请(专利权)人: 百度在线网络技术(北京)有限公司
主分类号: H04L12/24 分类号: H04L12/24;H04L29/08
代理公司: 北京清亦华知识产权代理事务所(普通合伙) 11201 代理人: 宋合成
地址: 100085 北京市*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 基于 hdfs scsi 容错 优化 方法 装置
【权利要求书】:

1.一种基于HDFS的SCSI容错优化方法,其特征在于,包括以下步骤:

接收客户端发出的对于第一数据块复本的请求;

将所述请求经由SCSI中间层发送至SCSI底层;

所述SCSI底层对所述请求进行处理并将处理结果返回至所述SCSI中间层;

所述SCSI中间层根据所述SCSI底层返回的处理结果执行回调以判断所述请求是成功、需要SCSI底层重试还是失败;以及

在判断需要SCSI底层重试时,设定重试次数或放弃重试。

2.根据权利要求1所述的基于HDFS的SCSI容错优化方法,其特征在于,进一步包括步骤:

在放弃重试时,将所述请求定向到第二数据块复本。

3.根据权利要求1或2所述的基于HDFS的SCSI容错优化方法,其特征在于,进一步包括步骤:

在所述请求失败时,将所述请求定向到第二数据块复本。

4.根据权利要求1或2所述的基于HDFS的SCSI容错优化方法,其特征在于,所述处理结果包括所述请求的状态码,所述SCSI底层返回的报错信息,SCSI中间层检测到的错误信息和感测信息。

5.根据权利要求4所述的基于HDFS的SCSI容错优化方法,其特征在于,

当所述SCSI底层反馈的报错信息与数据相关时,将所述重试次数设定为1次;以及

当所述SCSI底层反馈的报错信息与硬件相关时,放弃重试。

6.根据权利要求1或2所述的基于HDFS的SCSI容错优化方法,其特征在于,进一步包括步骤:

在所述请求失败时,将与所述请求对应的数据从所述第一数据块复本删除。

7.根据权利要求5所述的基于HDFS的SCSI容错优化方法,其特征在于,进一步包括步骤:

如果SCSI底层反馈的报错信息与硬件无关,则检查与所述请求对应的数据所在的扇区是否存在故障。

8.根据权利要求7所述的基于HDFS的SCSI容错优化方法,其特征在于,使用读方法检查与所述请求对应的数据所在的扇区是否存在故障。

9.一种基于HDFS的SCSI容错优化装置,其特征在于,包括:

接收模块,所述接收模块用于接收客户端发出的对于第一数据块复本的请求;

发送模块,所述发送模块用于将所述请求经由SCSI中间层发送至SCSI底层;

处理模块,所述SCSI底层利用所述处理模块对所述请求进行处理并将处理结果返回至所述SCSI中间层;以及

判断模块,所述SCSI中间层利用所述判断模块根据所述SCSI底层返回的处理结果执行回调以判断所述请求是成功、需要SCSI底层重试还是失败,并且在判断需要SCSI底层重试时,设定重试次数或放弃重试。

10.根据权利要求9所述的基于HDFS的SCSI容错优化装置,其特征在于,进一步包括:

定向模块,在放弃重试时,所述定向模块将所述请求定向到第二数据块复本。

11.根据权利要求9或10所述的基于HDFS的SCSI容错优化装置,其特征在于,在所述请求失败时,所述定向模块将所述请求定向到第二数据块复本。

12.根据权利要求9或10所述的基于HDFS的SCSI容错优化装置,其特征在于,所述处理结果包括所述请求的状态码,所述SCSI底层返回的报错信息,SCSI中间层检测到的错误信息和感测信息。

13.根据权利要求12所述的基于HDFS的SCSI容错优化装置,其特征在于,所述判断模块用于:

当所述SCSI底层反馈的报错信息与数据相关时,将所述重试次数设定为1次;以及

当所述SCSI底层反馈的报错信息与硬件相关时,放弃重试。

14.根据权利要求9或10所述的基于HDFS的SCSI容错优化装置,其特征在于,进一步包括:

删除模块,在所述请求失败时,所述删除模块将与所述请求对应的数据从所述第一数据块复本删除。

15.根据权利要求13所述的基于HDFS的SCSI容错优化装置,其特征在于,进一步包括:

检查模块,所述检查模块用于在SCSI底层反馈的报错信息与硬件无关的情况下检查与所述请求对应的数据所在的扇区是否存在故障。

16.根据权利要求15所述的基于HDFS的SCSI容错优化装置,其特征在于,所述检查模块使用读方法检查与所述请求对应的数据所在的扇区是否存在故障。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于百度在线网络技术(北京)有限公司,未经百度在线网络技术(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201210018166.7/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top