[发明专利]一种数据处理方法、装置、电子设备及存储介质

说明书

本公开关于一种数据处理方法、装置、电子设备及存储介质，涉及计算机技术领域。该方法包括：获取初始补数事件的恢复信息和固定任务实例集合；基于该恢复信息和该固定任务实例集合，从多个任务实例中确定至少两个目标任务实例；基于该恢复信息和至少一个待剪枝任务实例确定目标恢复信息；执行目标补数事件，以根据该目标恢复信息，使该至少两个目标任务实例中的每一个目标任务实例生成数据。本公开中，电子设备可以指示数量更少的任务实例生成数据，以得到用户需要的数据，能够保障下游数据的及时产出。同时，由于无需对该至少一个待剪枝任务实例执行数据生成操作，可以减少资源浪费，缩短用户需求数据的生产周期。

技术领域

本公开涉及计算机技术领域，尤其涉及一种数据处理方法、装置、电子设备及存储介质。

背景技术

目前，当某一任务实例生成的数据出现质量问题时，补数装置可以对该任务实例的全部下游任务实例执行阻断操作；并且当该生成的数据恢复正常时，可以对该全部下游任务实例执行恢复操作。

但是，在一种情况下，用户需要的数据可能只是基于该全部下游任务实例中的部分任务实例生成的。如此，对该全部下游任务实例中的每一个下游任务实例执行阻断操作和/或恢复操作，可能会浪费大量的资源，延长用户需求数据的生产周期。

发明内容

本公开提供一种数据处理方法、装置、电子设备及存储介质，解决了补数装置对某一任务实例的全部下游任务实例执行阻断操作和/或恢复操作，浪费大量资源，延长用户需求数据的生产周期的技术问题。

本公开实施例的技术方案如下：

根据本公开实施例的第一方面，提供一种数据处理方法。该方法可以包括：获取初始补数事件的恢复信息和固定任务实例集合，该恢复信息包括多个任务实例的标识，以及该多个任务实例之间的依赖关系，该固定任务实例集合包括至少两个固定任务实例；基于该恢复信息和该固定任务实例集合，从该多个任务实例中确定至少两个目标任务实例，该至少两个目标任务实例中包括该至少两个固定任务实例；基于该恢复信息以及至少一个待剪枝任务实例确定目标恢复信息，该目标恢复信息包括该至少两个目标任务实例的标识，以及该至少两个目标任务实例之间的依赖关系，该目标恢复信息为目标补数事件的恢复信息，该至少一个待剪枝任务实例为该多个任务实例中除该至少两个目标任务实例以外的任务实例；执行该目标补数事件，以根据该目标恢复信息，使该至少两个目标任务实例中的每一个目标任务实例生成数据。

可选地，上述从该多个任务实例中确定至少两个目标任务实例具体包括：当第一任务实例属于该固定任务实例集合时，确定该第一任务实例为目标任务实例，该第一任务实例为该多个任务实例中的一个。

可选地，上述从该多个任务实例中确定至少两个目标任务实例具体包括：当该第一任务实例不属于该固定任务实例集合时，确定该第一任务实例存在下游任务实例，该第一任务实例为该多个任务实例中的一个；当该第一任务实例不是该多个任务实例中的根任务实例，并且该第一任务实例对应的下游任务实例中存在固定任务实例时，将该第一任务实例确定为目标任务实例。

可选地，上述基于该恢复信息以及至少一个待剪枝任务实例确定目标恢复信息具体包括：基于该初始补数事件的恢复信息，生成初始有向无环图，该初始有向无环图为该初始补数事件对应的有向无环图，该初始有向无环图包括任务实例节点以及边，该任务实例节点用于表征任务实例，该边用于连接具有依赖关系的任务实例节点；对该初始有向无环图中包括的至少一个待剪枝任务实例节点执行剪枝操作，得到目标有向无环图，该至少一个待剪枝任务实例节点为该至少一个待剪枝任务实例表征的节点。