[发明专利]一种基于分布式存储的分布式调度方法有效
申请号: | 202210971491.9 | 申请日: | 2022-08-15 |
公开(公告)号: | CN115048225B | 公开(公告)日: | 2022-11-29 |
发明(设计)人: | 姚军;黄虹兵;陈海洪 | 申请(专利权)人: | 四川汉唐云分布式存储技术有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50;H04L67/1097 |
代理公司: | 成都时誉知识产权代理事务所(普通合伙) 51250 | 代理人: | 李双 |
地址: | 625000 四川*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 分布式 存储 调度 方法 | ||
1.一种基于分布式存储的分布式调度方法,其特征在于,包括如下步骤:
步骤一,获取分布式存储节点的内存占用、磁盘占用和CPU占用,根据内存占用、磁盘占用和CPU占用获取分布式存储节点获取任务的权重,根据分布式存储节点获取任务的权重对存储节点进行排序,得到第一分布式存储序列;
步骤二,根据第一分布式存储序列,获取用户与第一分布式存储序列中各分布式存储节点的访问延迟,根据访问延迟进行排序得到对应用户的第二分布式存储序列;
步骤三,分别计算对应用户的第二分布式存储序列中各分布式存储节点对任务的处理速率,根据分布式存储节点对任务的处理速率以及该分布式存储节点获取任务的权重,得到对应用户的分布式存储节点获取任务的权重,根据对应用户的分布式存储节点获取任务的权重进行排序,得到第三分布式存储序列;
步骤四,根据第三分布式存储序列和用户数据评价,完成用户数据分布式存储;
所述的根据内存占用、磁盘占用和CPU占用获取分布式存储节点获取任务的权重,采用如下公式:
其中a表示内存占用,b表示磁盘占用,c表示CPU占用,d表示距离权重;
所述的根据第一分布式存储序列,获取用户与第一分布式存储序列中各分布式存储节点的访问延迟,根据访问延迟进行排序得到对应用户的第二分布式存储序列,包括:将用户测试数据包打上时间戳分别发送给第一分布式存储序列中各分布式存储节点,获取各分布式存储节点接收到用户测试数据包的时间,根据各分布式存储节点接收到用户测试数据包的时刻与用户测试数据包的时间戳得到访问延迟;
所述的分别计算对应用户的第二分布式存储序列中各分布式存储节点对任务的处理速率,包括:获取分布式存储节点存储完成用户测试数据包的时刻,根据分布式存储节点接收到用户测试数据包的时刻与分布式存储节点存储完成用户测试数据包的时刻,得到用户测试数据包的处理时长,根据处理时长与用户测试数据包的数据大小得到处理速率;
所述的根据分布式存储节点对任务的处理速率以及该分布式存储节点获取任务的权重,得到对应用户的分布式存储节点获取任务的权重,包括根据得到的处理速率与分布式存储节点获取任务的权重的乘积,得到应用户的分布式存储节点获取任务的权重;
所述的根据第三分布式存储序列和用户数据评价,完成用户数据分布式存储,包括:
分别给第三分布式存储序列中的分布式存储节点设置用户数据离散率阈值,根据用户数据评价得到的用户数据离散率阈值,依次匹配第三分布式存储序列中的分布式存储节点,将用户数据存储到匹配的分布式存储节点中;
所述的用户数据离散率阈值为:
。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于四川汉唐云分布式存储技术有限公司,未经四川汉唐云分布式存储技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210971491.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:投标文件PDF格式化自动整合的方法
- 下一篇:一种全方位桥梁挠度测试装置