[发明专利]一种任务调度方法与装置有效
| 申请号: | 202011322687.2 | 申请日: | 2020-11-23 |
| 公开(公告)号: | CN112306719B | 公开(公告)日: | 2022-05-31 |
| 发明(设计)人: | 吴璨;王小宁;肖海力;迟学斌;和荣;卢莎莎 | 申请(专利权)人: | 中国科学院计算机网络信息中心 |
| 主分类号: | G06F9/54 | 分类号: | G06F9/54;G06F9/48 |
| 代理公司: | 北京亿腾知识产权代理事务所(普通合伙) 11309 | 代理人: | 陈霁 |
| 地址: | 100190 北京市*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 任务 调度 方法 装置 | ||
1.一种任务调度装置,其特征在于,应用于跨集群计算服务环境,包括:作业请求收集与分发模块,至少一个调度服务模块,以及至少一个作业执行服务模块;其中:
所述作业请求收集与分发模块,用于接收待执行作业的作业执行请求,所述作业执行请求包括待执行作业的第一描述信息,所述第一描述信息包括作业调度算法名称以及待执行作业的全局标识;
所述至少一个调度服务模块中与所述作业调度算法名称相匹配的当前调度服务模块,用于根据所述第一描述信息以及至少一个可用计算集群的计算资源信息,确定作业调度结果;其中,所述作业调度结果包括作业全局标识、用于执行待执行作业的高性能计算机的设备标识以及作业执行服务名称;
所述当前调度服务模块,还用于利用所述第一描述信息和所述作业调度结果生成第二描述信息,并向所述作业请求收集与分发模块提供所述第二描述信息;
所述作业请求收集与分发模块,还用于根据所述第二描述信息包含的所述作业调度结果中携带的作业执行服务名称,向当前作业执行服务模块分发所述第二描述信息;
所述至少一个作业执行服务模块中与所述作业执行服务名称相匹配的当前作业执行服务模块,用于接收所述当前调度服务模块确定的调度结果,并且根据所述调度结果中包含的设备标识和待执行作业的全局标识,将待执行作业提交至用于执行待执行作业的高性能计算机。
2.根据权利要求1所述的装置,其特征在于,所述第一描述信息还包括作业所需应用名称、作业所需队列名称以及作业所需高性能计算机的核数;
所述至少一个调度服务模块中与所述作业调度算法名称相匹配的当前调度服务模块,还用于获取计算资源信息;所述计算资源信息包括:应用列表以及应用资源;其中,所述应用列表用于指示所述至少一个可用计算集群的至少一个高性能计算机中各自部署的至少一个应用程序,所述应用资源用于指示所述至少一个计算集群中的每一个高性能计算机各自包含的至少一个计算队列,每个计算队列中包括其对应的高性能计算机的核数;
用于执行待执行作业的高性能计算机包含的至少一个计算队列中,包括所述作业所需队列名称;
用于执行待执行作业的高性能计算机对应的,并且名称为作业所需队列名称的当前队列中,包括的高性能计算机的可用核数不小于作业所需高性能计算机的核数;
用于执行所述待执行作业的高性能计算机部署的至少一个应用程序中,包括应用名称为所述作业所需应用名称的应用程序。
3.根据权利要求1所述的装置,其特征在于,所述作业第一描述信息还包括作业名、作业所需应用程序的版本、作业预计运行时长。
4.一种任务调度方法,其特征在于,应用于跨集群计算服务环境,所述方法包括:
通过作业请求收集与分发模块接收待执行作业的作业执行请求,所述作业执行请求包括待执行作业的第一描述信息,所述第一描述信息包括作业调度算法名称以及待执行作业的全局标识;
通过至少一个调度服务模块中与所述作业调度算法名称相匹配的当前调度服务模块,根据所述第一描述信息以及至少一个可用计算集群的计算资源描述信息,确定作业调度结果;其中,所述作业调度结果包括作业全局标识、用于执行所述待执行作业的高性能计算机的设备标识以及作业执行服务名称;
通过所述当前调度服务模块,利用所述第一描述信息和所述作业调度结果生成第二描述信息,向所述作业请求收集与分发模块提供所述第二描述信息;
通过所述作业请求收集与分发模块,根据所述第二描述信息包含的所述作业调度结果中携带的作业执行服务名称,向当前作业执行服务模块分发所述第二描述信息;
通过至少一个作业执行服务模块中与所述作业执行服务名称相匹配的当前作业执行服务模块,接收所述当前调度服务模块确定的调度结果,并且根据所述调度结果中包含的设备标识和所述待执行作业的全局标识,将所述待执行作业提交至用于执行所述待执行作业高性能计算机。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院计算机网络信息中心,未经中国科学院计算机网络信息中心许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011322687.2/1.html,转载请声明来源钻瓜专利网。





