[发明专利]一种资源配置方法、装置及电子设备有效
| 申请号: | 201711285077.8 | 申请日: | 2017-12-07 |
| 公开(公告)号: | CN108173905B | 公开(公告)日: | 2021-06-18 |
| 发明(设计)人: | 陈越晨 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
| 主分类号: | H04L29/08 | 分类号: | H04L29/08 |
| 代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 项京;马敬 |
| 地址: | 100080 北京市海淀区*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | 本发明实施例提供了一种资源配置方法、装置及电子设备,其中,该方法包括:获取多个任务中每个任务的运行参数,根据每个任务的运行参数,计算该任务的目标函数,获取服务器集群的预设资源总量,并根据预设资源总量和每个任务的目标函数,计算每个任务的最优资源使用量,并将每个任务的最优资源使用量发送至服务器集群,以使得服务器集群能够按照每个任务的最优资源使用量运行对应的任务。本发明实施例实现了对业务人员手动配置的资源进行智能优化,有效协调不同任务的资源使用,以达到全局最优的效果,有效提高服务器集群资源利用率,降低资源浪费。 | ||
| 搜索关键词: | 一种 资源配置 方法 装置 电子设备 | ||
获取多个任务中每个任务的运行参数,其中,任一任务的运行参数包括服务器集群多次运行该任务时的运行时间和资源使用量,所述资源使用量包括:内存使用量和处理器核数使用量;
根据所述每个任务的运行参数,计算该任务的目标函数,其中,所述目标函数用于描述运行时间与资源使用量之间的关系;
获取服务器集群的预设资源总量,并根据所述预设资源总量和所述每个任务的目标函数,计算所述每个任务的最优资源使用量,并将所述每个任务的最优资源使用量发送至所述服务器集群;其中,所述预设资源总量包括预设内存总量和预设处理器总核数,所述最优资源使用量为使得所述多个任务的总任务运行时间最小时的资源使用量。
2.根据权利要求1所述的方法,其特征在于,所述获取多个任务中每个任务的运行参数,包括:获取用户终端发送的多个任务请求,其中,所述任务请求中携带有内存申请量、处理器核数申请量和待运行任务;
将所述多个任务请求发送至服务器集群,以使所述服务器集群按照各任务请求中的内存申请量和处理器核数申请量,运行与各任务请求对应的待运行任务;
针对每个所述任务请求,获取服务器集群运行与该任务请求对应的待运行任务时的第一实际资源使用量和第一实际运行时间,并将所述第一实际资源使用量作为该任务的运行参数中的资源使用量,将所述第一实际运行时间作为该任务的运行参数中的运行时间。
3.根据权利要求1或2所述的方法,其特征在于,所述每个任务的运行参数至少包括4组,所述根据所述每个任务的运行参数,计算该任务的目标函数,包括:针对所述每个任务,采用最小二乘法,并选择该任务的运行参数中的任三组,通过第一公式:
计算该任务的目标函数公式ti(v,m)=aivi+bimi+ci的待定系数ai,bi,ci;
其中,所述ti(v,m)为第i个任务的运行时间,所述vi为第i个任务的处理器核数使用量,所述mi为第i个任务的内存使用量,所述θ(ai,bi,ci)为第i个任务的损失函数,所述为第i个任务的第j个运行时间,所述
为第i个任务的第j个处理器核数使用量,所述
为第i个任务的第j个内存使用量,1≤j≤3且为正整数;
计算所述待定系数的方差,并对比所述待定系数的方差是否小于预设方差阈值,在所述待定系数的方差小于所述预设方差阈值时,将所述待定系数作为该任务的目标函数的系数,得到该任务的目标函数;
在所述待定系数的方差不小于所述预设方差阈值时,重复执行所述采用最小二乘法,并选择该任务的运行参数中的任三组,通过第一公式计算该任务的目标函数公式的待定系数ai,bi,ci的步骤。
4.根据权利要求3所述的方法,其特征在于,所述根据所述预设资源总量和所述每个任务的目标函数,计算所述每个任务的最优资源使用量,包括:针对所述多个任务的总的资源量,以以下公式为限定条件:
和
通过第二公式:
计算不同资源使用量时的总的运行时间Tj,其中,所述vi为第i个任务的内存使用量,所述mi为第i个任务的处理器核数使用量,所述V为所述预设内存总量,所述M为所述预设处理器总核数,所述Tl为第l步迭代得到的总的任务运行时间,所述I为所述多个任务的总数;
对比所述不同资源使用量时的总的运行时间,得到所述多个任务的最小总运行时间,并根据所述最小总运行时间,确定与所述最小总运行时间对应的每个任务的最优资源使用量。
5.根据权利要求1所述的方法,其特征在于,在所述将所述每个任务的最优资源使用量发送至所述服务器集群之后,所述方法还包括:获取服务器集群按照每个任务的最优资源使用量运行该任务时的第二实际资源使用量及第二实际运行时间;
将所述第二实际资源使用量及所述第二实际运行时间添加至与该任务对应的运行参数中。
6.一种资源配置装置,其特征在于,所述装置包括:第一获取模块,用于获取多个任务中每个任务的运行参数,其中,任一任务的运行参数包括服务器集群多次运行该任务时的运行时间和资源使用量,所述资源使用量包括:内存使用量和处理器核数使用量;
目标函数计算模块,用于根据所述每个任务的运行参数,计算该任务的目标函数,其中,所述目标函数用于描述运行时间与资源使用量之间的关系;
最优资源计算模块,用于获取服务器集群的预设资源总量,并根据所述预设资源总量和所述每个任务的目标函数,计算所
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201711285077.8/,转载请声明来源钻瓜专利网。





