[发明专利]一种任务监控方法、装置、设备和介质

说明书

本发明实施例公开了一种任务监控方法、装置、设备和介质，涉及数据业务处理技术领域。该方法包括：获取任务链中每个任务在预设基准时间及所述基准时间之前的时间段内的最晚一次执行成功的执行开始时间和执行结束时间；遍历任务链以逐一确定当前任务，若所述当前任务的所述执行开始时间，早于所述当前任务直接依赖的上游任务的所述执行结束时间，则判断所述上游任务有更新；若更新任务满足预设更新条件，则根据所述更新任务的更新数据执行其下游任务。本发明实施例提供的一种任务监控方法、装置、设备和介质，解决了当任务链较长，且上游任务频繁更新时，会使得系统因对下游任务的不断执行，而导致系统内存占用量大的问题。

技术领域

本发明实施例涉及数据业务处理技术领域，尤其涉及一种任务监控方法、装置、设备和介质。

背景技术

在互联网大数据时代，以任务形式对数据进行组织和更新，是一种现有技术。例如，对于购物平台网站，每天需要对订单数据进行统计，统计维度可以是按照商品类别、商铺、或价格等统计出销售量、平均价格或增幅等指标结果。则相应的可以每天建立一个统计任务，对当天订单数据按照设定规则进行计算。下一天则建立另一个新的统计任务，需要基于前一天的统计任务的订单数据计算结果，继续结合当天新产生的订单数据进行计算。此处，需要依赖前一天统计结果的统计任务相对来说就是上游任务和下游任务的关系，如图1所示。可以是一个上游任务对应多个下游任务，例如，一个价格任务的统计结果会给到第二天销售额计算任务、排名计算任务中；也可以是多个上游任务对应一个下游任务。

在类似数据类型的项目中，当上游任务数据有更新时，具有依赖关系的下游任务数据也要相应的更新，以保证数据的完整性和一致性。例如，当以往某天的订单数据统计任务的基础数据发生了变化时，则统计结果会发生更新。比如发生退货退款情况，则前面的销售订单数据就会回溯发生变化。相应的，下游任务的数据也要更新。当前常见方法为：若监测到上游任务数据更新后，自动触发关联的下游任务重新执行，以保证数据的完整性和一致性。

但是，发明人在实现本发明的过程中，发现现有技术存在如下缺陷：参见图1，当任务2进行更新后，对应的下游任务5和任务6要相应执行一遍；较短时间后，如果任务3进行了更新，对应的下游任务5和任务6还要相应执行一遍，以更新下游任务数据。当任务链较长，且上游任务频繁更新时，会使得系统因对下游多个任务的执行，而导致系统内存占用量大的问题。

发明内容

本发明实施例提供一种任务监控方法、装置、设备和介质，以解决当任务链较长，且上游任务频繁更新时，会使得系统因对下游任务的不断执行，而导致系统内存占用量大的问题。

第一方面，本发明实施例提供了一种任务监控方法，该方法包括：

获取任务链中每个任务在预设基准时间及所述基准时间之前的时间段内的最晚一次执行成功的执行开始时间和执行结束时间；

遍历任务链以逐一确定当前任务，若所述当前任务的所述执行开始时间，早于所述当前任务直接依赖的上游任务的所述执行结束时间，则判断所述上游任务有更新；

若更新任务满足预设更新条件，则根据所述更新任务的更新数据执行其下游任务。

进一步的，在判断所述上游任务有更新之后，所述方法还包括：

基于所述任务链中任务的依赖关系，根据所述基准时间、任务的所述执行开始时间和任务的所述执行结束时间，生成任务的时间有向无环图。

进一步的，在生成任务的时间有向无环图之后，所述方法还包括：

将更新任务的所述执行结束时间和直接依赖其执行的下游任务的所述执行开始时间，在所述时间有向无环图中进行标记，并对标记后的时间有向无环图进行显示。

进一步的，在判断所述上游任务有更新之后，所述方法还包括：报警提示所述上游任务有更新。