[发明专利]一种资源调度方法、装置、计算机设备及存储介质

说明书

本公开提供了一种资源调度方法、装置、计算机设备及存储介质，其中，该方法包括：接收作业请求；响应于作业请求，基于目标作业的作业类型，利用三层虚拟队列模型中的队列命名空间队列、逻辑机房队列、和物理集群队列之间的层级关系为目标作业分配第一逻辑机房队列；响应于第一逻辑机房队列下关联的至少一个集群队列发生异常，基于目标作业的作业类型，确定队列命名空间队列下的第二逻辑机房队列；利用第二逻辑机房队列下关联的物理集群队列中的计算资源，执行目标作业。本公开实施例实现了在队列命名空间队列的范围内，自动地将目标作业从发生异常的第一逻辑机房队列迁移到正常的第二逻辑机房队列，使其具备了跨机房自动容灾的能力。

技术领域

本公开涉及计算机技术领域，具体而言，涉及一种资源调度方法、装置、计算机设备及存储介质。

背景技术

随着互联网技术的发展，越来越多的领域开始使用大数据进行计算和分析，对数据化运营等提供决策支持。

在大数据计算场景下，某些数据量比较大的计算任务需要分配资源充裕的计算队列才能满足计算需求。而实际中经常发生网络异常或设备异常等情况，异常的计算队列无法使用，容易导致计算任务无法正常进行。

发明内容

本公开实施例至少提供一种资源调度方法、装置、计算机设备及存储介质。

第一方面，本公开实施例提供了一种资源调度方法，包括：

接收作业请求，所述作业请求用于请求执行目标作业；

响应于所述作业请求，基于所述目标作业的作业类型，利用三层虚拟队列模型中的队列命名空间队列、逻辑机房队列、和物理集群队列三者之间的层级关系为所述目标作业分配对应的第一逻辑机房队列；其中，每个所述队列命名空间队列关联有多个所述逻辑机房队列，且每个所述逻辑机房队列下关联有至少一个所述物理集群队列；

响应于所述第一逻辑机房队列下关联的至少一个所述物理集群队列发生异常，基于所述目标作业的作业类型，确定所述队列命名空间队列下用于执行所述目标作业的第二逻辑机房队列；

利用所述第二逻辑机房队列下关联的物理集群队列中的计算资源，执行所述目标作业。

一种可选的实施方式中，接收作业请求之后，所述方法还包括：

响应于所述第一逻辑机房队列下未关联具有目标计算资源的物理集群队列，在所述第一逻辑机房队列下创建第一物理集群队列；所述目标计算资源用于执行所述目标作业；

建立所述第一物理集群队列与具有所述目标计算资源的第二物理集群队列之间的关联关系；所述第二物理集群队列为其他逻辑机房队列中的物理集群队列；

在所述第一物理集群队列，基于所述关联关系调度所述第二物理集群队列的所述目标计算资源执行所述目标作业。

一种可选的实施方式中，所述利用所述第二逻辑机房队列下关联的物理集群队列中的计算资源，执行所述目标作业，包括：

响应于当前执行所述目标作业的所述第二逻辑机房队列下关联的第三物理集群队列对应的计算资源数量小于所述目标作业所需要的计算资源数量，基于所述第二逻辑机房队列下关联的各个物理集群队列分别对应的计算资源数量，确定第四物理集群队列；

利用所述第四物理集群队列中的计算资源执行所述目标作业；或将所述第四物理集群队列与所述第三物理集群队列进行合并，得到第五物理集群队列，利用所述第五物理集群队列中的计算资源执行所述目标作业。

一种可选的实施方式中，所述基于所述目标作业的作业类型，利用三层虚拟队列模型中的队列命名空间队列、逻辑机房队列、和物理集群队列三者之间的层级关系为所述目标作业分配对应的第一逻辑机房队列，包括：