[发明专利]任务多副本执行的集群作业调度方法及系统有效
| 申请号: | 201711228523.1 | 申请日: | 2017-11-29 |
| 公开(公告)号: | CN108108233B | 公开(公告)日: | 2021-10-01 |
| 发明(设计)人: | 薛广涛;曹燕华;钱诗友;俞嘉地;李明禄 | 申请(专利权)人: | 上海交通大学 |
| 主分类号: | G06F9/48 | 分类号: | G06F9/48 |
| 代理公司: | 上海汉声知识产权代理有限公司 31236 | 代理人: | 庄文莉 |
| 地址: | 200240 *** | 国省代码: | 上海;31 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | 本发明提供了一种任务多副本执行的集群作业调度方法及系统,包括:拖后腿机器寻找:运用机器学习的方法,找出当前运行任务的拖后腿机器;最优副本数计算:拖后腿机器上的任务副本和所有任务同时启动,并且建立以最小化任务执行时间和运行成本为目标的优化模型,然后运用交替方向方法求解优化模型得出启动副本的最优数量。本发明免去了检测过程和拖后腿任务在被发现之前的执行时间;建立了以同时最小化作业的流程时间和在集群中的计算成本为优化目标,以集群中所有执行的任务数不超过集群中可用的计算节点数和每个任务的副本数不超过给定的阈值为限制条件的最优化模型。 | ||
| 搜索关键词: | 任务 副本 执行 集群 作业 调度 方法 系统 | ||
【主权项】:
1.一种任务多副本执行的集群作业调度方法,其特征在于,包括:拖后腿机器寻找步骤:运用机器学习的方法,找出当前运行任务的拖后腿机器;最优副本数计算步骤:拖后腿机器上的任务副本和所有任务同时启动,并且建立以最小化任务执行时间和运行成本为目标的优化模型,然后运用交替方向方法求解优化模型得出启动副本的最优数量。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海交通大学,未经上海交通大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201711228523.1/,转载请声明来源钻瓜专利网。





