[发明专利]分布式任务调度方法和装置

说明书

本发明实施例提供一种分布式任务调度方法和装置，解决现有任务调度系统的单点故障问题，使系统达到高可用性。该方法包括：创建线程池，并在线程池中初始化一个或多个线程；接收客户端的任务注册请求，并生成对应该任务的服务，所述服务具有服务信息；依据为所述服务预定义的调度配置参数，为所述服务分配一个或多个线程，所分配的每个线程依据所述服务信息以及所述调度配置参数单独向所述客户端请求所述服务，使得客户端可以响应所述每个线程对所述服务的请求，执行所述服务对应的任务，实现对任务的调度。

技术领域

本发明涉及计算机技术领域，特别地涉及一种分布式任务调度方法和装置。

背景技术

目前，针对电商业务的分布式系统包括：订单、仓储、配送、售后以及客服等等多个子系统，在分布式系统运行过程中各个子系统会产生大量有价值的业务数据，通常为了提高并发和解耦，分布式系统通常会采用先接受业务数据，再异步处理数据的软件设计方法。

当前基于Java开发语言、Spring组件构建的软件系统中，通常采用JDK Timer和Quartz两类分布式任务调度工具。Spring对组件JDK Timer和Quartz进行了丰富的和抽象和管理，通常仅需要开发人员通过配置文件对执行任务的Java代码进行配置和管理，Spring容器即可对任务进行调度。

然而，上述两类调度工具共同存在以下几个缺陷：1、代码的配置较多，代码维护量大；2、代码只能在一个服务器进行处理、存在单点故障，当服务器故障后无法自动再次执行，需人工介入；3、执行过程无法监控，如果执行异常开发人员得不到反馈；4、代码的执行通过配置进行初始化，想修改配置必须通过修改配置文件，重启应用才能解决。

因此，亟需一种能够解决单点故障的问题，方便管理和维护，具有高可用性的轻量级分布式任务调度方法和系统。

发明内容

有鉴于此，本发明提供一种分布式任务调度方法、装置、电子设备和计算机可读介质，解决现有任务调度系统的单点故障问题，使系统达到高可用性。

为实现上述目的，根据本发明的一个方面，提供了一种分布式任务调度方法，该方法包括：

创建线程池，并在线程池中初始化一个或多个线程；

接收客户端的任务注册请求，并生成对应该任务的服务，所述服务具有服务信息；

依据为所述服务预定义的调度配置参数，为所述服务分配一个或多个线程，所分配的每个线程依据所述服务信息以及所述调度配置参数单独向所述客户端请求所述服务，使得客户端可以响应所述每个线程对所述服务的请求，执行所述服务对应的任务，实现对任务的调度。

进一步的，在所述所分配的每个线程依据所述服务信息以及所述调度配置参数单独向所述客户端请求所述服务的步骤中包括：

所述每个线程通过预定义通信协议向客户端请求所述服务，所述预定义通信协议为http或tcp协议。

进一步的，所述服务信息包括以下各项中的至少一项：服务的协议、服务名、服务发现信息以及服务的状态。

进一步的，所述预定义的调度配置参数包括以下各项中的至少一项：

申请线程的个数、服务参数、每次获取数据的个数、每次执行数据的个数、执行时间的规则、有数据间隔的秒数、无数据间隔的秒数、处理数据的线程数、数据重试的次数以及服务超时秒数。

根据本发明的另一个方面，提供了一种分布式任务调度方法，该方法包括：

向服务端发送任务注册请求，以将任务注册到所述服务端并生成对应该任务的服务，所述服务具有服务信息，其中，所述服务端创建有线程池，并在线程池中初始化有一个或多个线程，所述服务端依据为所述服务预定义的调度配置参数，为所述服务分配一个或多个线程，所分配的每个线程依据所述服务信息以及所述调度配置参数单独请求所述服务；