[发明专利]一种分布式进程调度方法及系统

权利要求书

1.一种分布式进程调度方法，其特征在于，包括：

根据当前任务对应的Job实例数量、可用服务器的数量以及人为输入参数，对所述当前任务进行分片得到多个任务项；其中，所述多个任务项的数量与所述可用服务器的数量相等；

将所述多个任务项一一分配至所述多个可用服务器，并在所述多个可用服务器中分别对所述多个任务项分别进行处理。

2.根据权利要求1所述方法，其特征在于，在根据当前任务对应的Job实例数量、可用服务器的数量以及人为输入参数，对所述当前任务进行分片得到多个任务项之前，还包括：

将所述当前任务的Job实例注册至zookeeper组件；

根据所述zookeeper组件上的节点数量，获取所述当前任务对应的Job实例数量。

3.根据权利要求1所述方法，其特征在于，所述根据当前任务对应的Job实例数量、可用服务器的数量以及人为输入参数，对所述当前任务进行分片得到多个任务项，具体包括：

根据所述当前任务对应的Job实例数量、可用服务器的数量以及人为输入参数，获取对所述当前任务进行分片的分片数量；

将所述当前任务分为所述分片数量的分片项，并将所述分片数量的分片项按预设分配策略划分为所述多个任务项。

4.根据权利要求3所述方法，其特征在于，所述根据所述当前任务对应的Job实例数量、可用服务器的数量以及人为输入参数，获取对所述当前任务进行分片的分片数量，具体包括：

计算所述Job实例数量乘以所述可用服务器的数量的乘积与所述人为输入参数的和或差，得到所述分片数量。

5.根据权利要求3所述方法，其特征在于，所述预设分配策略为平均分配策略、作业名哈希值奇偶数分配策略或轮转分配策略。

6.根据权利要求所述方法，其特征在于，所述将所述多个任务项一一分配至所述多个可用服务器，并在所述多个可用服务器中分别对所述多个任务项分别进行处理，具体包括：

当一个或多个所述可用服务器中的主机资源的使用率大于预设阈值时，停止对主机资源的使用率大于预设阈值的所述可用服务器中的非紧急业务对应的分片项进行处理，直至其中核心业务对应的分片项处理结束后再开始对所述非紧急业务对应的分片项进行处理。

7.根据权利要求1所述方法，其特征在于，所述将所述多个任务项一一分配至所述多个可用服务器，并在所述多个可用服务器中分别对所述多个任务项分别进行处理，具体包括：

当所述多个任务项中存在失效任务项时，将所述失效任务项对应的可用服务器用于处理孤儿任务项。

8.一种分布式进程调度系统，其特征在于，包括：

分片模块，用于根据当前任务对应的Job实例数量、可用服务器的数量以及人为输入参数，对所述当前任务进行分片得到多个任务项；其中，所述多个任务项的数量与所述可用服务器的数量相等；

调度模块，用于将所述多个任务项一一分配至所述多个可用服务器，并在所述多个可用服务器中分别对所述多个任务项分别进行处理。

9.一种电子设备，其特征在于，包括处理器、通信接口、存储器和总线，其中，处理器，通信接口，存储器通过总线完成相互间的通信，处理器可以调用存储器中的逻辑指令，以执行如权利要求1至7任一项所述的分布式进程调度方法。

10.一种非暂态计算机可读存储介质，其特征在于，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行如权利要求1至7任一项所述的分布式进程调度方法。