[发明专利]调度方法、装置、电子设备、存储介质及软件产品在审
申请号: | 202110342673.5 | 申请日: | 2021-03-30 |
公开(公告)号: | CN113296905A | 公开(公告)日: | 2021-08-24 |
发明(设计)人: | 张佐玮;王庆龙;曾凡松 | 申请(专利权)人: | 阿里巴巴新加坡控股有限公司 |
主分类号: | G06F9/48 | 分类号: | G06F9/48;G06F9/50;G06F9/54;G06F11/36 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 赵娟 |
地址: | 新加坡珊顿道*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 调度 方法 装置 电子设备 存储 介质 软件产品 | ||
本申请实施例提供了一种计算资源的调度方法、装置、系统、电子设备、存储介质、软件产品,其中,调度方法可以应用于计算集群,计算集群可以包括若干个计算节点,则在运行过程中,可以获取各个计算节点的节点信息,以及针对计算节点的归一化模型,接着根据节点信息与归一化模型,计算各个计算节点的目标算力,然后根据计算节点的资源状态与目标算力,为计算节点进行计算资源的调度,通过归一化模型可以对不同计算节点的算力进行归一化,得到相同标准下各个计算节点的算力,实现算力的归一化,解决了算力异构的问题,并且通过对算力归一化后的计算节点进行资源调度,可以有效保证资源的利用率,保证线上服务的正常运行。
技术领域
本申请涉及数据处理技术领域,特别是涉及一种计算资源的调度方法、一种计算资源的调度装置、一种电子设备、一种计算机可读存储介质以及一种软件产品。
背景技术
互联网数据中心(Internet Data Center,简称IDC)是指一种拥有完善的设备(包括高速互联网接入带宽、高性能局域网络、安全可靠的机房环境等)、专业化的管理、完善的应用的服务平台。通常来说,IDC内一台服务器的寿命为3-5年,伴随着采购和下线,每年都会有一定数据量的机器被置换,由于CPU的架构、制程工艺精度每年都会在更新换代,相隔几年的CPU型号就会存在巨大的性能差异。在这种情况下,往往只能按照最低的算力情况来为应用规划资源需求,这往往会导致大量的资源浪费。例如对于电子商务、大数据运算、AI(Artificial Intelligence,人工智能)训练等应用,这些应用通常需要运行在数据中心内多台机器上,应用的不同运算设备之间很容易由于“算力异构”存在性能差异。同时,基础计算节点的差异也容易给运维人员带来较大的负担,使得资源调度变得非常复杂,还容易由于错误的资源分配导致线上服务出现故障。
发明内容
本申请实施例是提供一种计算资源的调度方法、装置、电子设备、计算机可读存储介质以及软件产品,以解决或部分解决现有技术中计算集群的资源算力差异导致的资源浪费、资源调度复杂以及服务容易出现故障的问题。
本申请实施例公开了一种计算资源的调度方法,包括:
获取各个所述计算节点的节点信息,以及针对所述计算节点的归一化模型;
根据所述节点信息与所述归一化模型,获得所述计算节点的目标算力;
根据所述计算节点的资源状态与目标算力,为所述计算节点进行计算资源的调度。
可选地,所述节点信息至少包括型号信息以及配置状态信息,所述配置状态信息包括计算核心数量,所述根据所述节点信息与所述归一化模型,获得所述计算节点的目标算力,包括:
从所述归一化模型中,获取与所述型号信息和所述配置状态信息对应的目标归一化系数;
采用所述目标归一化系数与所述计算核心数量,计算所述计算节点的目标算力;
其中,所述配置状态信息至少还包括超频是否开启、超线程是否开启、单核算力以及相对算力中的一种。
可选地,所述归一化模型通过如下方式生成:
获取针对各个所述计算节点的第一性能测试结果以及第二性能测试结果,所述第一性能测试结果为基于第一性能测试标准的测试结果,所述第二性能测试结果为基于第二性能测试标准的测试结果;
获取针对所述第一性能测试结果与所述第二性能测试结果的比例系数;
采用所述比例系数、所述第一性能测试结果以及所述第二性能测试结果,计算针对所述计算节点的预设归一化系数;
采用各个所述计算节点的节点信息和预设归一化系数,生成所述归一化模型。
可选地,所述根据所述计算节点的资源状态与目标算力,为所述计算节点进行计算资源的调度,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴新加坡控股有限公司,未经阿里巴巴新加坡控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110342673.5/2.html,转载请声明来源钻瓜专利网。