[发明专利]任务调度方法、装置、计算机设备及可读存储介质

说明书

本发明公开了任务调度方法、装置、计算机设备及可读存储介质，涉及计算机技术领域，包括获取任务信息，所述任务信息包括至少一个服务节点的调度任务；同步所述任务信息中的所述调度任务；监测所述服务节点中所述调度任务的运行状态；获取与所述调度任务关联的关联任务及依赖关系；根据所述依赖关系控制服务节点的所述关联任务的运行状态和所述调度任务的运行状态，解决了现有的各个不同的数据处理工具之间的任务调度不能关联，人工处理流程复杂且不利于后续维护的问题。

技术领域

本发明涉及计算机技术领域，尤其涉及一种任务调度方法、装置、计算机设备及可读存储介质。

背景技术

随着科技的发展和互联网应用的增加，应用于网络的数据很多，为了有效的对数据进行运算和存储，大多采用数据处理的工具，包括传统关系型数据库，、大数据、还有一些其他的非关系型数据库，但是前述这些不同种类的数据库处理数据时，需要依赖各自的调度任务，比如，hadoop任务和datastage任务是通过不同的工具在不同的工作平台进行调度。

现有的各个不同的数据处理工具之间的任务调度不能关联，只能通过各自自定义检测工具或者批次数据检测来识别各个调度任务之间的数据依赖，尤其是比较大型的项目，使用多个不同数据处理工具，需要人工沟通协作，增加了整体流程的复杂性，不利于后续的项目维护、调优。

发明内容

本发明的目的是提供一种任务调度方法、装置、计算机设备及可读存储介质，用于解决现有的各个不同的数据处理工具之间的任务调度不能关联，人工处理流程复杂且不利于后续维护的问题。

为实现上述目的，本发明提供一种任务调度方法，包括：

获取任务信息，所述任务信息包括至少一个服务节点的调度任务；

同步所述任务信息中的所述调度任务；

监测所述服务节点中所述调度任务的运行状态；

获取与所述调度任务关联的关联任务及依赖关系；

根据所述依赖关系控制服务节点的所述关联任务的运行状态和所述调度任务的运行状态；

其中，所述依赖关系包括直接制约关系和间接制约关系；所述运行状态包括未运行状态、开始运行状态以及结束运行状态。

进一步的，所述监测所述服务节点中所述调度任务的运行状态，包括以下：

获取所述服务节点的工作状态，所述工作状态包括空闲状态和忙碌状态；

判断所述服务节点的负载状态是否为空闲状态；

若是，获取与所述进服务器节点中所述调度任务关联的关联任务并建立依赖关系；

若否，将所述调度任务存于一等待队列中。

进一步的，获取与所述调度任务关联的关联任务并建立依赖关系，包括以下：

根据所述调度任务携带的关联标识，查询关联任务集合，以获取与所述调度任务关联的所述关联任务；

根据所述关联标识的状态信息，确认所述调度任务与所述关联任务的依赖关系。

进一步的，根据所述关联标识的状态信息，确认所述调度任务与所述关联任务的依赖关系，包括：

所述状态信息为任务优先级；

当所述关联标识的任务优先级高于预设任务时，所述调度任务与所述关联任务之间的依赖关系为直接制约关系；

当所述关联标识的任务优先级低于预设任务时，所述调度任务与所述关联任务之间的依赖关系为间接制约关系。