[发明专利]作业调度方法、装置和电子设备

权利要求书

1.一种作业调度方法，其特征在于，所述方法包括：

对作业进行解析，得到所述作业对应的特征信息；

根据所述特征信息，计算得到运行所述作业所需的资源；

根据运行所述作业所需的资源，确定运行所述作业的目标机房；

将所述作业提交到所述目标机房，以使所述目标机房运行所述作业。

2.根据权利要求1所述的作业调度方法，其特征在于，所述特征信息包括作业消费的数据源的信息、算子的类型以及每个类型的算子的个数；所述根据所述特征信息，计算得到运行所述作业所需的资源的步骤包括：

根据所述数据源的信息，查询得到所述数据源的输出速率；

根据每个类型的算子的个数以及每个类型的算子的复杂度系数，计算得到计算逻辑复杂度；

根据所述输出速率以及所述计算逻辑复杂度，计算得到运行所述作业所需的资源。

3.根据权利要求2所述的作业调度方法，其特征在于，所述资源包括资源容量；所述根据所述输出速率以及所述计算逻辑复杂度，计算得到运行所述作业所需的资源的步骤包括：

根据所述输出速率以及所述计算逻辑复杂度，计算得到目标CPU核数；

根据所述目标CPU核数计算得到目标内存；

根据所述目标内存以及所述目标CPU核数，得到运行所述作业所需的资源容量。

4.根据权利要求3所述的作业调度方法，其特征在于，所述根据所述输出速率以及所述计算逻辑复杂度，计算得到目标CPU核数的步骤包括：

通过以下公式计算得到所述目标CPU核数：

其中，X为目标CPU核数；A为所述输出速率；S为单核单复杂度的数据消费速率；B为计算逻辑复杂度；C为常数。

5.根据权利要求3所述的作业调度方法，其特征在于，所述特征信息还包括时延需求以及所述作业的输出信息，所述根据运行所述作业所需的资源，确定运行所述作业的目标机房的步骤包括：

获取当前各个机房的剩余资源容量；

根据所述数据源的信息，查询得到所述数据源所在的源机房；

根据所述作业的输出信息，查询得到所述作业的输出机房；

获取所述源机房到各个机房的网络延迟以及带宽单价；

获取各个机房到所述输出机房的网络延迟以及带宽单价；

根据所述剩余资源容量、所述源机房到各个机房的网络延迟以及带宽单价、所述各个机房到所述输出机房的网络延迟以及带宽单价、所述时延需求以及所述资源容量，计算得到所述目标机房。

6.根据权利要求5所述的作业调度方法，其特征在于，所述计算得到所述目标机房的步骤包括：

通过以下公式计算得到目标机房：

其中，F(R_s→R_k)表示从源机房R_s到第k个机房R_k的带宽单价；F(R_k→R_d)表示从第k个机房R_k到输出机房R_d的带宽单价；A表示源机房的输出速率，E表示输出机房的输入速率；U_Rk(X,M)表示第k个机房的剩余资源容量；U(X,M)表示资源容量；D(expect)表示时延需求，D(work)表示作业引入的延迟；D(R_s→R_k)表示源机房R_s到第k个机房R_k的网络延迟；D(R_k→R_d)表示从第k个机房R_k到输出机房R_d的网络延迟。

7.根据权利要求3所述的作业调度方法，其特征在于，所述资源还包括实例个数以及实例规格；所述将所述作业提交到所述目标机房的步骤包括：

获取与所述实例规格相同的多个目标实例；其中，所述目标实例的个数与所述实例个数相同；

将各所述目标实例以及所述作业提交到所述目标机房，以使所述目标机房根据各所述目标实例，运行所述作业。