[发明专利]基于HDFS的SCSI容错优化方法及装置有效
申请号: | 201210018166.7 | 申请日: | 2012-01-19 |
公开(公告)号: | CN103220162A | 公开(公告)日: | 2013-07-24 |
发明(设计)人: | 胡殿明;魏伟;王志谦 | 申请(专利权)人: | 百度在线网络技术(北京)有限公司 |
主分类号: | H04L12/24 | 分类号: | H04L12/24;H04L29/08 |
代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 宋合成 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 hdfs scsi 容错 优化 方法 装置 | ||
1.一种基于HDFS的SCSI容错优化方法,其特征在于,包括以下步骤:
接收客户端发出的对于第一数据块复本的请求;
将所述请求经由SCSI中间层发送至SCSI底层;
所述SCSI底层对所述请求进行处理并将处理结果返回至所述SCSI中间层;
所述SCSI中间层根据所述SCSI底层返回的处理结果执行回调以判断所述请求是成功、需要SCSI底层重试还是失败;以及
在判断需要SCSI底层重试时,设定重试次数或放弃重试。
2.根据权利要求1所述的基于HDFS的SCSI容错优化方法,其特征在于,进一步包括步骤:
在放弃重试时,将所述请求定向到第二数据块复本。
3.根据权利要求1或2所述的基于HDFS的SCSI容错优化方法,其特征在于,进一步包括步骤:
在所述请求失败时,将所述请求定向到第二数据块复本。
4.根据权利要求1或2所述的基于HDFS的SCSI容错优化方法,其特征在于,所述处理结果包括所述请求的状态码,所述SCSI底层返回的报错信息,SCSI中间层检测到的错误信息和感测信息。
5.根据权利要求4所述的基于HDFS的SCSI容错优化方法,其特征在于,
当所述SCSI底层反馈的报错信息与数据相关时,将所述重试次数设定为1次;以及
当所述SCSI底层反馈的报错信息与硬件相关时,放弃重试。
6.根据权利要求1或2所述的基于HDFS的SCSI容错优化方法,其特征在于,进一步包括步骤:
在所述请求失败时,将与所述请求对应的数据从所述第一数据块复本删除。
7.根据权利要求5所述的基于HDFS的SCSI容错优化方法,其特征在于,进一步包括步骤:
如果SCSI底层反馈的报错信息与硬件无关,则检查与所述请求对应的数据所在的扇区是否存在故障。
8.根据权利要求7所述的基于HDFS的SCSI容错优化方法,其特征在于,使用读方法检查与所述请求对应的数据所在的扇区是否存在故障。
9.一种基于HDFS的SCSI容错优化装置,其特征在于,包括:
接收模块,所述接收模块用于接收客户端发出的对于第一数据块复本的请求;
发送模块,所述发送模块用于将所述请求经由SCSI中间层发送至SCSI底层;
处理模块,所述SCSI底层利用所述处理模块对所述请求进行处理并将处理结果返回至所述SCSI中间层;以及
判断模块,所述SCSI中间层利用所述判断模块根据所述SCSI底层返回的处理结果执行回调以判断所述请求是成功、需要SCSI底层重试还是失败,并且在判断需要SCSI底层重试时,设定重试次数或放弃重试。
10.根据权利要求9所述的基于HDFS的SCSI容错优化装置,其特征在于,进一步包括:
定向模块,在放弃重试时,所述定向模块将所述请求定向到第二数据块复本。
11.根据权利要求9或10所述的基于HDFS的SCSI容错优化装置,其特征在于,在所述请求失败时,所述定向模块将所述请求定向到第二数据块复本。
12.根据权利要求9或10所述的基于HDFS的SCSI容错优化装置,其特征在于,所述处理结果包括所述请求的状态码,所述SCSI底层返回的报错信息,SCSI中间层检测到的错误信息和感测信息。
13.根据权利要求12所述的基于HDFS的SCSI容错优化装置,其特征在于,所述判断模块用于:
当所述SCSI底层反馈的报错信息与数据相关时,将所述重试次数设定为1次;以及
当所述SCSI底层反馈的报错信息与硬件相关时,放弃重试。
14.根据权利要求9或10所述的基于HDFS的SCSI容错优化装置,其特征在于,进一步包括:
删除模块,在所述请求失败时,所述删除模块将与所述请求对应的数据从所述第一数据块复本删除。
15.根据权利要求13所述的基于HDFS的SCSI容错优化装置,其特征在于,进一步包括:
检查模块,所述检查模块用于在SCSI底层反馈的报错信息与硬件无关的情况下检查与所述请求对应的数据所在的扇区是否存在故障。
16.根据权利要求15所述的基于HDFS的SCSI容错优化装置,其特征在于,所述检查模块使用读方法检查与所述请求对应的数据所在的扇区是否存在故障。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于百度在线网络技术(北京)有限公司,未经百度在线网络技术(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201210018166.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:高铁含量的三维立体蒸镀掩模板
- 下一篇:一种带隐藏出酒器的艺术酒桶