[发明专利]主OSD调整方法及装置有效
申请号: | 201811364986.5 | 申请日: | 2018-11-16 |
公开(公告)号: | CN109558437B | 公开(公告)日: | 2021-01-01 |
发明(设计)人: | 张天洁 | 申请(专利权)人: | 新华三技术有限公司成都分公司 |
主分类号: | G06F16/2458 | 分类号: | G06F16/2458 |
代理公司: | 北京超凡志成知识产权代理事务所(普通合伙) 11371 | 代理人: | 苏胜 |
地址: | 610000 四川省成都市中国(四川)自由*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | osd 调整 方法 装置 | ||
本发明涉及分布式存储技术领域,提供一种主OSD调整方法及装置,所述方法包括:计算每个PG对应的OSD元组;遍历多个OSD元组,将满足预设调整条件的OSD元组确定为待调整OSD元组;从待调整OSD元组的至少一个从OSD中确定目标OSD;交换待调整OSD元组中的主OSD与目标OSD的主从角色,以使目标OSD调整为对应的待调整OSD元组的调整后的主OSD。与现有技术相比,本发明通过调整每个PG的OSD元组中的主OSD,使得所有主OSD上的PG个数保持近似均衡,实现用户数据访问请求近似均匀地分布在主OSD上。
技术领域
本发明涉及分布式存储技术领域,具体而言,涉及一种主OSD调整方法及装置。
背景技术
Ceph分布式存储系统中,待存储的用户数据通常首先会被切成固定长度的对象,每个对象归属一个归置组(Placement Group,PG),Ceph分布式存储系统以PG为单位对存储的用户数据进行管理,每个PG中的用户数据最终以预设的副本策略存储至多个对象存储设备(Object Storage Device,OSD)上,为了使存储的用户数据均衡地分布在各OSD上,Ceph分布式存储系统根据各OSD的状态信息、采用CRUSH(Controlled Replication UnderScalable Hashing)算法得到与每个PG对应的OSD元组,该OSD元组包括按序排列的多个不同OSD,每个PG及其多个副本存储在对应的OSD元组中的多个不同OSD中,以此实现多个PG在多个OSD整体上近似均匀的分布,在每个OSD元组中,排在第一个OSD为主OSD,其余为从OSD,而主OSD是直接接收用户数据访问请求的,因此,主OSD需要处理的访问请求比其余从OSD要密集得多,CRUSH算法虽然保证了用户数据可以近似均匀地分布在不同的OSD上,但是无法保证每个主OSD上的PG个数也近似均衡,因而无法保证用户数据访问请求近似均匀地分布在主OSD上,最终无法使Ceph分布式存储系统的整体性能得以充分发挥。
发明内容
本发明实施例的目的在于提供一种主OSD调整方法及装置,通过调整每个PG的OSD元组中的主OSD,使得Ceph分布式存储系统中所有主OSD上的PG个数保持近似均衡,实现用户数据访问请求近似均匀地分布在主OSD上,从而使Ceph分布式存储系统的整体性能得以充分发挥。
为了实现上述目的,本发明实施例采用的技术方案如下:
第一方面,本发明实施例提供了一种主OSD调整方法,应用于Ceph分布式存储系统中的客户端,所述Ceph分布式存储系统包括多个PG及多个OSD,所述方法包括:计算每个PG对应的OSD元组,其中,OSD元组包括从多个OSD中确定的主OSD和至少一个从OSD;遍历多个OSD元组,判断当前OSD元组是否满足预设调整条件;当当前OSD元组满足预设调整条件时,将当前OSD元组确定为待调整OSD元组;从待调整OSD元组的至少一个从OSD中确定目标OSD;交换待调整OSD元组中的主OSD与目标OSD的主从角色,以使目标OSD调整为待调整OSD元组的调整后的主OSD。
第二方面,本发明实施例还提供了一种主OSD调整装置,应用于Ceph分布式存储系统中的客户端,所述装置包括计算模块、遍历模块、第一确定模块、第二确定模块和交换模块。其中,计算模块用于计算每个PG对应的OSD元组,其中,OSD元组包括从多个OSD中确定的主OSD和至少一个从OSD;遍历模块用于遍历多个OSD元组,判断当前OSD元组是否满足预设调整条件;第一确定模块用于当所述OSD元组满足预设调整条件时,将当前OSD元组确定为待调整OSD元组,第二确定模块用于从待调整OSD元组的至少一个从OSD中确定目标OSD,交换模块用于交换待调整OSD元组中的主OSD与目标OSD的主从角色,以使目标OSD调整为所述待调整OSD元组的调整后的主OSD。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于新华三技术有限公司成都分公司,未经新华三技术有限公司成都分公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811364986.5/2.html,转载请声明来源钻瓜专利网。
- 上一篇:基于转移熵的机场航班延误因果关系挖掘方法
- 下一篇:房价信息系统