[发明专利]分布式存储系统数据处理方法、装置、设备及存储介质有效
申请号: | 202110945150.X | 申请日: | 2021-08-17 |
公开(公告)号: | CN113656208B | 公开(公告)日: | 2023-06-16 |
发明(设计)人: | 吕兴海;靖金鑫;王威 | 申请(专利权)人: | 北京神州新桥科技有限公司 |
主分类号: | G06F11/07 | 分类号: | G06F11/07 |
代理公司: | 北京智信四方知识产权代理有限公司 11519 | 代理人: | 黄健 |
地址: | 100089 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分布式 存储系统 数据处理 方法 装置 设备 存储 介质 | ||
本公开实施例公开了一种分布式存储系统数据处理方法、装置、设备及存储介质,所述方法包括:响应于检测到磁盘故障,利用修复工具对发生故障的磁盘进行修复;获取修复失败的M个故障磁盘的磁盘属性,根据所述磁盘属性从预设磁盘集中匹配得到N个磁盘;其中,所述磁盘属性至少包括:磁盘类型、磁盘容量;M、N为自然数;创建与所述N个磁盘数量适配的挂载点,并将所述N个磁盘挂载到所述挂载点上;向客户端发送提示信息,以使所述客户端进行数据处理。上述技术方案节省了运维人员在更换磁盘后需要重复修改mount脚本中的uuid和挂载目录的操作,降低了误操作带来的风险,实现了自动化磁盘管理,极大地提高了分布式存储系统数据处理的便利性与高效性。
技术领域
本公开涉及计算机应用技术领域,具体涉及一种分布式存储系统数据处理方法、装置、设备及存储介质。
背景技术
随着计算机技术的快速发展,分布式存储系统的应用越来越广泛。分布式存储系统由多台存储服务器组成,每个存储服务器有数十块磁盘,每个磁盘挂载一个本地文件系统作为一个数据存储单元。在分布式操作系统中,由于磁盘读写负载长期较高,导致磁盘设备故障频发,因此,需要频繁识别故障磁盘并进行磁盘修复,以保证客户端处理处理的同步性。然而由于出现故障的磁盘数量往往较多,在修复失败需要更换磁盘的情况下,运维人员需要重复执行mount命令以将磁盘一一挂载到相应的挂载点上,这种方式效率低下,影响分布式存储系统正常对外提供服务。
发明内容
为了解决相关技术中的问题,本公开实施例提供一种分布式存储系统数据处理方法、装置、设备及存储介质。
第一方面,本公开实施例中提供了一种分布式存储系统数据处理方法。
具体地,所述分布式存储系统数据处理方法,包括:
响应于检测到磁盘故障,利用修复工具对发生故障的磁盘进行修复;
获取修复失败的M个故障磁盘的磁盘属性,根据所述磁盘属性从预设磁盘集中匹配得到N个磁盘;其中,所述磁盘属性至少包括:磁盘类型、磁盘容量;M、N为自然数;
创建与所述N个磁盘数量适配的挂载点,并将所述N个磁盘挂载到所述挂载点上;
向客户端发送提示信息,以使所述客户端进行数据处理。
结合第一方面,本公开在第一方面的第一种实现方式中,所述根据所述磁盘属性从预设磁盘集中匹配得到N个磁盘,包括:
将预设磁盘集中的磁盘进行分类,并按照磁盘容量大小进行排序;
基于分类结果匹配所述M个故障磁盘的磁盘类型,并基于排序结果选择所述预设磁盘集中适当数量的磁盘以匹配所述M个故障磁盘的磁盘容量。
结合第一方面的第一种实现方式,本公开在第一方面的第二种实现方式中,所述基于分类结果匹配所述M个故障磁盘的磁盘类型,包括:
若无法匹配到同一类型磁盘,则根据M个故障磁盘的存储数据、存储风险等级,适配其他类型的磁盘。
结合第一方面的第二种实现方式,本公开在第一方面的第三种实现方式中,所述存储风险等级通过利用传感器检测服务器所在环境参数确定。
结合第一方面、第一方面的第一种实现方式、第一方面的第二种实现方式、第一方面的第三种实现方式,本公开在第一方面的第四种实现方式中,所述方法还包括:
当检测到M个故障磁盘中有P个磁盘未加载,删除所述P个磁盘对应的挂载点;
当检测到所述P个磁盘重新被加载,则加入预设磁盘集中。
结合第一方面,本公开在第一方面的第五种实现方式中,所述客户端采用DMA机制进行数据处理。
第二方面,本公开实施例中提供了一种分布式存储系统数据处理装置。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京神州新桥科技有限公司,未经北京神州新桥科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110945150.X/2.html,转载请声明来源钻瓜专利网。