[发明专利]一种分布式进程调度方法及系统

说明书

本发明实施例提供了一种分布式进程调度方法及系统，包括：根据当前任务对应的Job实例数量、可用服务器的数量以及人为输入参数，对所述当前任务进行分片得到多个任务项；其中，所述多个任务项的数量与所述可用服务器的数量相等；将所述多个任务项一一分配至所述多个可用服务器，并在所述多个可用服务器中分别对所述多个任务项分别进行处理。通过在分布式的调度任务环境下将当前任务分片，再将分片后得到的多个任务项分配至对应的多个可用服务器上并行处理，相对于现有的单机定时调度模式，该方法处理能力大大提高，其中一个服务器异常不会影响其他服务器的处理进程，其吞吐量大，稳定性高。

技术领域

本发明实施例涉及自动运维技术领域，更具体地，涉及一种分布式进程调度方法及系统。

背景技术

当前互联网业务发展迅速,业务数据具有海量，高并发的特性。业务数据处理既要保证高效性，也要保证准确性和安全性。因此大部分业务逻辑从主流程中剥离通过异步定时调度的方式处理，如工作流，业务短信，批量操作业务等。

当前异步定时调度处理方式有线程的while(true)和sleep组合、使用Timer定时器触发任务或者使用quartz框架，其中通过多线程并发模式提高处理效率。

但是，现有技术中单机版的定时调度模式的业务处理能力受服务器硬件资源的制约，并且会由于程序或者系统异常导致核心功能瘫痪甚至存在宕机的风险。

发明内容

本发明实施例提供了一种克服上述问题或者至少部分地解决上述问题的分布式进程调度方法及系统。

第一方面本发明实施例提供了一种分布式进程调度方法，包括：

根据当前任务对应的Job实例数量、可用服务器的数量以及人为输入参数，对所述当前任务进行分片得到多个任务项；其中，所述多个任务项的数量与所述可用服务器的数量相等；

将所述多个任务项一一分配至所述多个可用服务器，并在所述多个可用服务器中分别对所述多个任务项分别进行处理。

另一方面本发明实施例提供了一种分布式进程调度系统，包括：

分片模块，用于根据当前任务对应的Job实例数量、可用服务器的数量以及人为输入参数，对所述当前任务进行分片得到多个任务项；其中，所述多个任务项的数量与所述可用服务器的数量相等；

调度模块，用于将所述多个任务项一一分配至所述多个可用服务器，并在所述多个可用服务器中分别对所述多个任务项分别进行处理。

第三方面本发明实施例提供了包括处理器、通信接口、存储器和总线，其中，处理器，通信接口，存储器通过总线完成相互间的通信，处理器可以调用存储器中的逻辑指令，以执行第一方面提供的分布式进程调度方法。

第四方面本发明实施例提供了一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行第一方面提供的分布式进程调度方法。

本发明实施例提供的一种分布式进程调度方法及系统，通过在分布式的调度任务环境下将当前任务分片，再将分片后得到的多个任务项分配至对应的多个可用服务器上并行处理，相对于现有的单机定时调度模式，该方法处理能力大大提高，其中一个服务器异常不会影响其他服务器的处理进程，其吞吐量大，稳定性高。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的一种分布式进程调度方法的流程图；