[发明专利]任务执行方法、装置、存储介质及电子装置

说明书

本发明实施例提供了一种任务执行方法、装置、存储介质及电子装置，其中，该方法包括：获取有向无环图DAG中包括的目标节点的目标上游节点的任务执行结果；基于预先配置的目标逻辑关系确定与目标上游节点的任务执行结果对应的预设任务处理方式，其中，目标逻辑关系用于指示上游节点的任务执行结果与下游节点的任务处理方式的对应关系；控制目标节点的目标下游节点按照预设任务处理方式进行任务处理。通过本发明，解决了相关技术中存在的任务节点的执行逻辑设置的灵活性差的问题，达到了提高任务调度系统的灵活性和易用性的效果。

技术领域

本发明实施例涉及大数据技术领域，具体而言，涉及一种任务执行方法、装置、存储介质及电子装置。

背景技术

大数据技术演进至今，数据中台体系已经越来越多的应用在各种业务领域。任务调度系统，作为数据中台体系的基础，承载着整个数据中台的任务编排、分发以及执行的工作。那么，如何对现有的传统的任务调度系统进行优化，提高其对于开发人员的易用性及对于自身的任务执行效率，可谓是当务之急。

当前传统的任务调度系统一般只支持整体任务按照有向无环图(DAG)顺序执行，一个任务节点是否会被触发执行的条件是它的所有上游节点全部都被触发执行，而且执行结果均为成功。这种任务执行逻辑可以满足部分开发场景，但是却没有考虑到例如某一任务节点N的多个上游节点中有未执行或者执行失败的情况，但是节点N依然需要被执行的场景，换言之，开发人员无法自行设定节点是否被触发执行或者怎么被触发执行的逻辑，即相关技术中任务节点的执行逻辑设置不够灵活。

针对相关技术中存在的任务节点的执行逻辑设置的灵活性差的问题，目前尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种任务执行方法、装置、存储介质及电子装置，以至少解决相关技术中存在的任务节点的执行逻辑设置的灵活性差的问题。

根据本发明的一个实施例，提供了一种任务执行方法，包括：获取有向无环图DAG中包括的目标节点的目标上游节点的任务执行结果；基于预先配置的目标逻辑关系确定与所述目标上游节点的任务执行结果对应的预设任务处理方式，其中，所述目标逻辑关系用于指示上游节点的任务执行结果与下游节点的任务处理方式的对应关系；控制所述目标节点的目标下游节点按照所述预设任务处理方式进行任务处理。

在一个示例性实施例中，获取有向无环图DAG中包括的目标节点的目标上游节点的任务执行结果包括：获取所述目标上游节点的任务执行结果中包括的任务完成结果和/或任务输出结果，其中，所述任务完成结果包括以下之一：任务已完成、任务未完成、任务未执行，所述任务输出结果包括所述目标上游节点在执行任务之后所触发输出的结果；基于预先配置的目标逻辑关系确定与所述目标上游节点的任务执行结果对应的预设任务处理方式包括：基于预先配置的目标逻辑关系确定与所述任务完成结果和/或任务输出结果对应的所述预设任务处理方式。

在一个示例性实施例中，在所述目标上游节点的数量为多个的情况下，获取有向无环图DAG中包括的目标节点的目标上游节点的任务执行结果包括：分别获取每个所述目标上游节点的所述任务执行结果；基于预先配置的目标逻辑关系确定与所述目标上游节点的任务执行结果对应的预设任务处理方式包括：基于预先配置的逻辑关系确定与多个所述目标上游节点的所述任务执行结果对应的所述预设任务处理方式。

在一个示例性实施例中，在所述目标下游节点的数量为多个的情况下，基于预先配置的目标逻辑关系确定与所述目标上游节点的任务执行结果对应的预设任务处理方式包括：基于预先配置的目标逻辑关系确定与所述目标上游节点的任务执行结果对应的每个所述目标下游节点的所述预设任务处理方式；控制所述目标下游节点按照所述预设任务处理方式进行任务处理包括：控制每个所述目标下游节点按照每个所述目标下游节点的所述预设任务处理方式进行任务处理。