[发明专利]一种基于分布式存储的慢盘检测方法及装置

说明书

本发明提供一种基于分布式存储的慢盘检测方法及装置，所述方法包括如下步骤：在分布式存储集群各存储节点为IO性能数据设置门限开关，并配置门限参数；设置对象存储设备OSD监控其所在的存储节点，根据门限开关状态以及门限参数配置值，判断存储节点是否为慢盘，以及在约定周期内慢盘判定次数达到约定次数时，将慢盘上报集群控制器；设置集群控制器隔离慢盘，更新对象存储设备OSD映射，将隔离慢盘数据备份到对象存储设备OSD映射的新硬盘，并向管理模块进行慢盘故障告警。本发明将分布式存储集群的IO性能数据与门限参数结合进行慢盘检测，通过约定周期的滑动窗口内，约定次数的不可达项目进行慢盘判定，并对慢盘隔离，保证数据冗余。

技术领域

本发明属于分布式存储磁盘检测技术领域，具体涉及一种基于分布式存储的慢盘检测方法及装置。

背景技术

OSD，是Object-based Storage Device的简称，对象存储设备。

分布式存储ceph是为云平台提供Ceph对象存储，Ceph块设备，Ceph文件系统的一个统一开放标准的大规模分布式现代化存储系统。

在CEPH中如果有磁盘故障会导致OSD不工作，造成集群报警，甚至丢失数据。现在的技术普遍是针对磁盘的smart信息判断是否有问题，比如使用磁盘厂商希捷，日立，东芝等封装好的磁盘检查工具直接得出磁盘的健康状态，或者使用smartctl工具进行自行的封装检测，现有的检测手段比较单一，不能有效结合分布式存储的使用状况与整体磁盘效能去检测，也不能结合系统特性做处理，最后处理故障或者亚健康磁盘也比较暴力，采用直接踢盘的操作，不能有效做好数据冗余容易造成数据丢失。

此为现有技术的不足，因此，针对现有技术中的上述缺陷，提供一种基于分布式存储的慢盘检测方法及装置，是非常有必要的。

发明内容

针对现有技术的上述现有分布式存储磁盘故障检测手段单一，不能结合分布式存储使用状态的缺陷，本发明提供一种基于分布式存储的慢盘检测方法及装置，以解决上述技术问题。

第一方面，本发明提供一种基于分布式存储的慢盘检测方法，包括如下步骤：

S1.在分布式存储集群各存储节点为IO性能数据设置门限开关，并配置门限参数；

S2.设置对象存储设备OSD监控其所在的存储节点，根据门限开关状态以及门限参数配置值，判断存储节点是否为慢盘，以及在约定周期内慢盘判定次数达到约定次数时，将慢盘上报集群控制器；

S3.设置集群控制器隔离慢盘，更新对象存储设备OSD映射，将隔离慢盘数据备份到对象存储设备OSD映射的新硬盘，并向管理模块进行慢盘故障告警。

进一步地，步骤S1具体步骤如下：

S11.在分布式存储集群内各存储节点设置慢盘检测开关；

S12.在分布式存储集群内各存储节点选择门限类别，设置各类别门限参与慢盘判决的方式；

S13.在分布式存储集群内各存储节点根据选择门限类别，设置各类别统一门限，并为各类别门限设置开关；

S14.根据存储节点的磁盘类型及各类别统一门限设置慢盘判定的IO性能模型。慢盘检测开关用于限定是否在存储节点开启慢盘检测；门限类别为选择的进行慢盘判定的参数，门限参与慢盘判决的方式包括满足该门限判定为慢盘或者满足该门限判定为非慢盘；类别门限开关为是否选用该门限参数进行慢盘判定；IO性能模型需要通过已有的IO性能数据进行训练。

进一步地，所述门限类别包括延时门限、服务时间门限、平均IO门限以及带宽门限；

所述磁盘类型包括但不限于5400转磁盘、7200转磁盘、10000转磁盘、15000转磁盘以及20000转磁盘。