[发明专利]一种用于提升应用存储能力的存储配置优化的方法

说明书

本发明涉及一种新兴信息技术领域，公开了一种用于提升应用存储能力的存储配置优化的方法，本发明针对Kubernetes使用Ceph作为分布式存储的场景，提出了一种存储配置优化方法，根据CephOsd的位置，计算出应用合适的部署位置，使其尽可能的接近存储节点，提高存储的IO能力以及减少因存储IO引起的集群内跨宿主机间的网络流量。

技术领域

本发明涉及新兴信息技术领域，特别涉及一种用于提升应用存储能力的存储配置优化的方法

背景技术

Kubernetes集群存储目前支持多种存储卷类型，其中有Ceph RBD (RADOS blockdevice)类型，为了充分利用物理节点的CPU、内存、存储等资源，在Kubernetes上使用CephRBD时部署架构主要采用是Kubernetes 的Node节点和Ceph OSD节点混合部署；如图1所示，Kubernetes的Node节点和Ceph的存储节点部署在同一服务器上的，Ceph OSD节点为Ceph的存储节点部分；在该部署架构下，Kubernetes在分配应用Pod动态申请RBD挂载至Pod容器内部时，整个过程并不关心应用Pod与该应用申请的数据存储的 Ceph OSD之间的相对位置关系，导致该相对位置呈现随机分布，容易出现应用节点远离存储的情况，从而无法高效的发挥Ceph存储的IO能力，并增加了一些不必要的因存储IO引起的集群内跨宿主机间的网络流量。

发明内容

本发明要解决的技术问题是克服现有技术的缺陷，提供一种用于提升应用存储能力的存储配置优化的方法，针对Kubernetes使用Ceph作为分布式存储的场景，提出了一种存储配置优化方法，根据Ceph Osd的位置，计算出应用合适的部署位置，使其尽可能的接近存储节点，提高存储的IO能力以及减少因存储IO引起的集群内跨宿主机间的网络流量。

为了解决上述技术问题，本发明提供了如下的技术方案：

本发明提供一种用于提升应用存储能力的存储配置优化的方法，包括具有5个节点的集群Kubernetes，即Node01/Node02/Node03/Node04/Node05；其中Node节点即是Kubernetes的工作节点，同时也是Ceph的OSD存储节点即OSD-1/OSD-2/OSD-3/OSD-4/OSD-5；具体步骤如下：

一、通过云计算平台启动2个应用Pod(APP01、APP02)，各自申请了 RBD块设备作为持久化存储(RBD01、RBD02)并通过Kubernetes的调度策略分配到了Node5节点上；

二、当前应用Pod与申请的RBD对应的OSD节点的相对位置呈现随机关系，假设RDB01设备上的数据存储在了OSD-1、OSD-2上，RDB02设备上的数据主要存储在了OSD-3、OSD-4上；

三、当APP01或者APP02读取RBD上的数据时，所有的IO操作须跨宿主机分别读取Node01/Node02/Node03/Node04的OSD的数据；

四、将APP01部署在Node01或者Node02、APP02部署在Node03或者Node04 上才是比较合理的部署位置，具体过程描述如下；

1)用户提交创建Kubernetes Pod请求；

2)在请求提交给Kubernetes Apiserver之前，判断该请求是否需要使用CephRBD，如果是则进入下一步，如果否，则直接将请求传递给Kubernetes Apiserver；

3)查询Ceph接口获取该RBD上数据的OSD节点分布列表，结合排序算法获取分布最多数据的OSD节点名称；

4)修改Pod创建请求参加，增加Node的亲和性属性，配置为上一步中获取的OSD节点名称；

5)调用Kubernetes Apiserver创建Pod；