[发明专利]一种资源调度方法、装置、设备和介质

权利要求书

1.一种资源调度方法，其特征在于，所述方法用于作业管理器，包括：

获取待执行的作业，判断所述作业的类型是否为容器运行类型；

若是，将配置的资源组转换为容器的物理资源量，以使所述作业在限定资源的容器内运行；

若否，将配置的资源组根据工作节点数和运行策略转换为每个工作节点的物理资源量，以使所述作业在限定资源的节点上运行。

2.根据权利要求1所述的方法，其特征在于，所述配置的资源组包括CPU最大资源量；

所述将配置的资源组转换为容器的物理资源量，具体包括：

将所述CPU最大资源量转换为容器作业申请资源量。

3.根据权利要求2所述的方法，其特征在于，所述将CPU最大资源量转换为容器作业申请资源量，具体包括：

将所述CPU最大资源量按照预设比例进行压缩，转换为容器作业申请资源量。

4.根据权利要求2所述的方法，其特征在于，所述配置的资源组包括内存最大资源量，所述运行策略包括：CPU优先或内存优先；

若所述运行策略包括CPU优先，所述将配置的资源组根据工作节点数和运行策略转换为每个工作节点的物理资源量，具体包括：

根据所述CPU最大资源量、工作节点数以及主节点CPU资源量计算单个工作节点运行的任务数量；

根据所述每个工作节点运行的任务数量、所述工作节点数、单个任务的CPU资源量以及所述主节点CPU资源量计算每个工作节点上每个任务的CPU资源量，所述单个任务的内存固定为4G。

5.根据权利要求4所述的方法，其特征在于，若所述运行策略包括内存优先，所述将配置的资源组根据工作节点数和运行策略转换为每个工作节点的物理资源量，具体包括：

根据单个任务的内存资源量、所述工作节点数以及所述主节点内存资源量计算每个工作节点的内存资源量，所述单个任务的CPU固定为1core。

6.根据权利要求1所述的方法，其特征在于，判断所述作业的类型是否为容器运行类型，具体包括：

判断所述作业的类型是否为命令行类型，所述命令行类型包括：python、perl、shell或java。

7.一种资源调度方法，其特征在于，所述方法用于资源管理器，包括：

接收作业管理器发送的容器的物理资源量或每个工作节点的物理资源量；

根据所述容器的物理资源量为待执行的作业对应的容器分配资源，使得作业在限定资源的容器内运行或根据所述每个工作节点的物理资源量为所述待执行的作业对应的节点分配资源，使得作业在限定资源的节点上运行；

其中，所述容器的物理资源量是所述作业管理器在确定所述作业的类型为容器运行类型时，将所述作业的配置的资源组转换得到的；

所述每个工作节点的物理资源量是所述作业管理器在确定所述作业的类型为非容器运行类型时，将所述作业的配置的资源组根据工作节点数和运行策略转换获得的。

8.根据权利要求7所述的方法，其特征在于，所述资源管理器包括Kubernetes和yarn；

所述Kubernetes用于根据所述容器的物理资源量为所述作业对应的容器分配执行资源；

所述yarn用于根据所述每个工作节点的物理资源量为所述作业对应的节点分配执行资源。

9.一种资源调度装置，其特征在于，所述装置，包括：

第一获取模块，用于获取待执行的作业；

判断模块，用于判断所述作业的类型是否为容器运行类型；

第二获取模块，用于当所述作业的类型为容器运行类型时，将配置的资源组转换为容器的物理资源量，以使作业在限定资源的容器内运行；以及若将配置的资源组根据工作节点数和运行策略转换为每个工作节点的物理资源量，以使作业在限定资源的节点上运行。