[发明专利]集群任务前置调度分配方法、装置、介质及计算机设备在审
| 申请号: | 202110099364.X | 申请日: | 2021-01-25 |
| 公开(公告)号: | CN112799807A | 公开(公告)日: | 2021-05-14 |
| 发明(设计)人: | 邓天全 | 申请(专利权)人: | 武汉华大基因技术服务有限公司 |
| 主分类号: | G06F9/48 | 分类号: | G06F9/48;G06F9/50;G06F16/901;G06F16/903 |
| 代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 肖阳 |
| 地址: | 430073 湖北省武汉市东湖新技术开发区高新*** | 国省代码: | 湖北;42 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 集群 任务 前置 调度 分配 方法 装置 介质 计算机 设备 | ||
1.一种集群任务前置调度分配方法,其特征在于,包括:
建立集群队列数据库表,并配置动态参数任务,其中,所述动态参数任务包括队列;
根据所述动态参数任务查询所述队列在所述集群队列数据库表中的资源使用情况,并根据所述队列在所述集群队列数据库表中的资源使用情况获取可使用资源表;
对所述可使用资源表进行排序,并根据排序结果确定所述动态参数任务的任务参数;
将携带所述任务参数的任务提交到集群调度系统,以便所述集群调度系统分配并执行携带所述任务参数的任务。
2.如权利要求1所述的集群任务前置调度分配方法,其特征在于,所述集群队列数据库表包括节点名称、内存量、线程数和队列信息,其中,所述节点名称作为主键内容不可重复。
3.如权利要求2所述的集群任务前置调度分配方法,其特征在于,所述动态参数任务还包括设置线程区间的任务线程和设置内存区间的任务内存,其中,每个线程区间与一个内存区间对应。
4.如权利要求3所述的集群任务前置调度分配方法,其特征在于,根据所述动态参数任务查询所述队列在所述集群队列数据库表中的资源使用情况,包括:
根据所述队列获取所述集群队列数据库表中该队列对应的各节点内存使用情况和线程数使用情况。
5.如权利要求4所述的集群任务前置调度分配方法,其特征在于,根据所述队列在所述集群队列数据库表中的资源使用情况获取可使用资源表,包括:
根据所述集群队列数据库表中该队列对应的各节点内存使用情况确定各节点当前剩余可投递任务的内存大小,并根据所述集群队列数据库表中该队列对应的各节点线程数使用情况确定各节点当前可使用的线程数,以及将所述各节点当前剩余可投递任务的内存大小和所述各节点当前可使用的线程数进行合并以获得所述可使用资源表。
6.如权利要求5所述的集群任务前置调度分配方法,其特征在于,对所述可使用资源表进行排序,包括:
对所述可使用资源表中的各节点当前可使用的线程数和各节点当前剩余可投递任务的内存大小按照列进行倒序排序,以获得所述排序结果。
7.如权利要求3-6中任一项所述的集群任务前置调度分配方法,其特征在于,根据排序结果确定所述动态参数任务的任务参数,包括:
根据所述排序结果确定最闲置节点,并判断所述最闲置节点的当前可使用的线程数和当前剩余可投递任务的内存大小是否同时满足所述动态参数任务中所述线程区间的上限和所述内存区间的上限;
如果是,则将所述动态参数任务的线程数和内存均取所述线程区间的上限和所述内存区间的上限;
如果否,则将所述动态参数任务的线程数和内存均取所述线程区间的下限和所述内存区间的下限。
8.一种计算机可读存储介质,其特征在于,其上存储有集群任务前置调度分配程序,该集群任务前置调度分配程序被处理器执行时实现如权利要求1-7中任一项所述的集群任务前置调度分配方法。
9.一种计算机设备,其特征在于,包括存储器、处理器及存储在存储器上并可在处理器上运行的集群任务前置调度分配程序,所述处理器执行所述集群任务前置调度分配程序时,实现如权利要求1-7中任一项所述的集群任务前置调度分配方法。
10.一种集群任务前置调度分配装置,其特征在于,包括:
创建模块,用于建立集群队列数据库表;
配置模块,用于配置动态参数任务,其中,所述动态参数任务包括队列;
查询模块,用于根据所述动态参数任务查询所述队列在所述集群队列数据库表中的资源使用情况;
确定模块,用于根据所述队列在所述集群队列数据库表中的资源使用情况获取可使用资源表,并对所述可使用资源表进行排序,以及根据排序结果确定所述动态参数任务的任务参数;
发送模块,用于将携带所述任务参数的任务提交到集群调度系统,以便所述集群调度系统分配并执行携带所述任务参数的任务。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于武汉华大基因技术服务有限公司,未经武汉华大基因技术服务有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110099364.X/1.html,转载请声明来源钻瓜专利网。





