[发明专利]分布式存储系统数据处理方法、装置、设备及存储介质有效

专利信息
申请号: 202110945150.X 申请日: 2021-08-17
公开(公告)号: CN113656208B 公开(公告)日: 2023-06-16
发明(设计)人: 吕兴海;靖金鑫;王威 申请(专利权)人: 北京神州新桥科技有限公司
主分类号: G06F11/07 分类号: G06F11/07
代理公司: 北京智信四方知识产权代理有限公司 11519 代理人: 黄健
地址: 100089 北京市海*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 分布式 存储系统 数据处理 方法 装置 设备 存储 介质
【说明书】:

本公开实施例公开了一种分布式存储系统数据处理方法、装置、设备及存储介质,所述方法包括:响应于检测到磁盘故障,利用修复工具对发生故障的磁盘进行修复;获取修复失败的M个故障磁盘的磁盘属性,根据所述磁盘属性从预设磁盘集中匹配得到N个磁盘;其中,所述磁盘属性至少包括:磁盘类型、磁盘容量;M、N为自然数;创建与所述N个磁盘数量适配的挂载点,并将所述N个磁盘挂载到所述挂载点上;向客户端发送提示信息,以使所述客户端进行数据处理。上述技术方案节省了运维人员在更换磁盘后需要重复修改mount脚本中的uuid和挂载目录的操作,降低了误操作带来的风险,实现了自动化磁盘管理,极大地提高了分布式存储系统数据处理的便利性与高效性。

技术领域

本公开涉及计算机应用技术领域,具体涉及一种分布式存储系统数据处理方法、装置、设备及存储介质。

背景技术

随着计算机技术的快速发展,分布式存储系统的应用越来越广泛。分布式存储系统由多台存储服务器组成,每个存储服务器有数十块磁盘,每个磁盘挂载一个本地文件系统作为一个数据存储单元。在分布式操作系统中,由于磁盘读写负载长期较高,导致磁盘设备故障频发,因此,需要频繁识别故障磁盘并进行磁盘修复,以保证客户端处理处理的同步性。然而由于出现故障的磁盘数量往往较多,在修复失败需要更换磁盘的情况下,运维人员需要重复执行mount命令以将磁盘一一挂载到相应的挂载点上,这种方式效率低下,影响分布式存储系统正常对外提供服务。

发明内容

为了解决相关技术中的问题,本公开实施例提供一种分布式存储系统数据处理方法、装置、设备及存储介质。

第一方面,本公开实施例中提供了一种分布式存储系统数据处理方法。

具体地,所述分布式存储系统数据处理方法,包括:

响应于检测到磁盘故障,利用修复工具对发生故障的磁盘进行修复;

获取修复失败的M个故障磁盘的磁盘属性,根据所述磁盘属性从预设磁盘集中匹配得到N个磁盘;其中,所述磁盘属性至少包括:磁盘类型、磁盘容量;M、N为自然数;

创建与所述N个磁盘数量适配的挂载点,并将所述N个磁盘挂载到所述挂载点上;

向客户端发送提示信息,以使所述客户端进行数据处理。

结合第一方面,本公开在第一方面的第一种实现方式中,所述根据所述磁盘属性从预设磁盘集中匹配得到N个磁盘,包括:

将预设磁盘集中的磁盘进行分类,并按照磁盘容量大小进行排序;

基于分类结果匹配所述M个故障磁盘的磁盘类型,并基于排序结果选择所述预设磁盘集中适当数量的磁盘以匹配所述M个故障磁盘的磁盘容量。

结合第一方面的第一种实现方式,本公开在第一方面的第二种实现方式中,所述基于分类结果匹配所述M个故障磁盘的磁盘类型,包括:

若无法匹配到同一类型磁盘,则根据M个故障磁盘的存储数据、存储风险等级,适配其他类型的磁盘。

结合第一方面的第二种实现方式,本公开在第一方面的第三种实现方式中,所述存储风险等级通过利用传感器检测服务器所在环境参数确定。

结合第一方面、第一方面的第一种实现方式、第一方面的第二种实现方式、第一方面的第三种实现方式,本公开在第一方面的第四种实现方式中,所述方法还包括:

当检测到M个故障磁盘中有P个磁盘未加载,删除所述P个磁盘对应的挂载点;

当检测到所述P个磁盘重新被加载,则加入预设磁盘集中。

结合第一方面,本公开在第一方面的第五种实现方式中,所述客户端采用DMA机制进行数据处理。

第二方面,本公开实施例中提供了一种分布式存储系统数据处理装置。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京神州新桥科技有限公司,未经北京神州新桥科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110945150.X/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top