[发明专利]一种集群的存储池创建方法有效
申请号: | 202110188470.5 | 申请日: | 2021-02-19 |
公开(公告)号: | CN112905118B | 公开(公告)日: | 2023-01-20 |
发明(设计)人: | 王庆海 | 申请(专利权)人: | 山东英信计算机技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京连和连知识产权代理有限公司 11278 | 代理人: | 张涛;宋薇薇 |
地址: | 250101 山东省济南市高新区*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 集群 存储 创建 方法 | ||
本发明公开了一种集群的存储池创建方法包括:为每个物理节点中的每个对象存储设备均在相对应的物理节点中的一个缓存设备上创建缓存分区;基于每个物理节点具有的缓存设备的数量创建相同数量的根,并在每个根下创建与每个物理节点相对应的主机;将集群的每个对象存储设备均添加到对象存储设备所对应的缓存分区所在的缓存设备所对应的根和主机;在多个根上分别创建存储池并形成作为多副本存储池的故障域。本发明能够合理划分集群的故障域,提升集群容错能力。
技术领域
本发明涉及集群领域,更具体地,特别是指一种集群的存储池创建方法。
背景技术
集群监控模块是分布式文件系统的核心模块,其主要功能是管理集群和监控集群的各种状态,并负责响应各种命令。管理软件不是构成分布式文件系统的基本模块,而是一个独立于集群的外部模块。管理软件通过与集群监控交互来实现对集群的管理和监控。管理软件是个图形化的web应用软件,管理软件可以方便用户进行集群部署、扩容、缩容以及集群资源划分等。
故障域是进行故障隔离的一个概念,也是PG(放置组)分布的一个概念,即PG分布是以故障域为单位进行隔离的。比如三副本的多副本存储池,以节点为单位划分故障域时,则PG的三个副本将分别分布在三个不同节点的3个不同的OSD(对象存储设备)上,一个节点断电则存储池的PG至多只会故障一个副本,还有两个副本可以正常工作,这也要求至少需要3个节点才能划分三副本节点级故障域的存储池。同理,基于纠删码的存储池如果是以节点作为故障域,则至少需要K+M个节点。三副本对容量的利用率理论上是三分之一,即33.33%,纠删码对容量的利用率取决于K和M的值,以纠删8+2为例,理论上上的利用率为80%。按照节点级故障域的概念,8+2纠删码存储池需要10个节点才行。现有技术通过划分逻辑节点来达到满足故障域的要求。比如5个物理节点,可以通过将每个物理节点上的OSD一比一划分到两个逻辑节点下,这样就在5个物理节点上模拟出10个逻辑节点,这样就可以在10个逻辑节点上创建8+2的纠删码存储池,按照故障域的概念,这种模拟出的逻辑节点中如果有一个发生OSD故障不会影响其他逻辑节点,按照故障域的概念,这种模拟出的8+2纠删存储池最多允许同时故障两个逻辑节点的OSD。
在集群的实际应用场景中,为了提高集群的性能,会使用SSD(固态硬盘)作为缓存或者日志加速等,这样就增加了OSD与SSD之间的耦合度,让集群变得复杂。为了达到经济性和高性能的折中,一块SSD会被多个OSD共享。这就造成了OSD和SSD的高耦合,当一个SSD发生故障时,共享该SSD的OSD都会发生异常,造成这些OSD故障无法使用。于此同时,由于故障域划分时并未考虑到OSD共享SSD的情况以及模拟逻辑节点的情况,这会造成共享同一个SSD的OSD被划分到两个不同的逻辑节点上,当该SSD故障时,就会造成两个不同的逻辑节点的OSD发生故障;当两个物理节点上各有一块SSD发生故障时就会造成4个逻辑节点的OSD发生故障,这样就超出了故障域,造成存储池无法使用。
针对现有技术集群存储池的故障干扰性强、容错能力低下的问题,目前尚无有效的解决方案。
发明内容
有鉴于此,本发明实施例的目的在于提出一种集群的存储池创建方法,能够合理划分集群的故障域,提升集群容错能力。
基于上述目的,本发明实施例的第一方面提供了一种集群的存储池创建方法,包括在每个物理节点均具有多个缓存设备的场景中执行以下步骤:
为每个物理节点中的每个对象存储设备均在相对应的物理节点中的一个缓存设备上创建缓存分区;
基于每个物理节点具有的缓存设备的数量创建相同数量的根,并在每个根下创建与每个物理节点相对应的主机;
将集群的每个对象存储设备均添加到对象存储设备所对应的缓存分区所在的缓存设备所对应的根和主机;
在多个根上分别创建存储池并形成作为多副本存储池的故障域。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山东英信计算机技术有限公司,未经山东英信计算机技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110188470.5/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种食品加工用榛子开口装置
- 下一篇:一种降噪混凝土墙板的加工方法