[发明专利]数据处理任务的执行文件生成方法、装置、设备及介质

权利要求书

1.一种数据处理任务的执行文件生成方法，其特征在于，包括：

响应于用户在预设界面上针对目标数据处理任务配置数据流图，获取与所述数据流图对应的节点信息文件，其中，所述节点信息文件包括所述数据流图中的数据节点信息、算子节点信息和各节点之间的连接关系信息；

基于所述节点信息文件，生成与所述目标数据处理任务对应的目标执行文件，其中，所述目标执行文件用于在运行时执行所述目标数据处理任务。

2.根据权利要求1所述的方法，其特征在于，所述基于所述节点信息文件，生成与所述目标数据处理任务对应的目标执行文件，包括：

针对所述节点信息文件中的数据节点信息，确定所述数据节点信息对应的节点属性信息，所述节点属性信息用于描述与所述数据节点信息关联的数据的属性；

针对所述节点信息文件中的算子节点信息，确定所述算子节点信息对应的逻辑表达式；

基于所述节点属性信息、所述逻辑表达式以及所述连接关系信息，生成与所述目标数据处理任务对应的目标执行文件。

3.根据权利要求1所述的方法，其特征在于，在所述生成与所述目标数据处理任务对应的目标执行文件之后，所述方法还包括：

运行所述目标执行文件，以基于获取的源数据得到与所述源数据对应的目标数据，其中，所述源数据为所述目标数据处理任务的待处理数据；

基于所述目标数据确定所述目标执行文件的执行结果，于所述预设界面上显示所述执行结果，其中，所述执行结果包括执行成功或执行失败。

4.根据权利要求3所述的方法，其特征在于，在所述于所述预设界面上显示所述执行结果之后，所述方法还包括：

若所述执行结果为执行失败，则响应于用户基于所述执行结果在所述数据流图上确定的待测试子流图，获取与所述待测试子流图对应的待测试节点文件，其中，所述待测试节点文件包括所述待测试子流图中的数据节点信息、算子节点信息以及各节点之间的连接关系信息；

基于所述待测试节点文件，生成与所述待测试子流图对应的待测试子任务的子任务执行文件，其中，所述子任务执行文件用于在运行时执行所述待测试子任务；

根据所述子任务执行文件的运行结果确定所述待测试子任务的测试结果，于所述预设界面上显示所述测试结果。

5.根据权利要求4所述的方法，其特征在于，所述根据所述子任务执行文件的运行结果确定所述待测试子任务的测试结果，包括：

运行所述子任务执行文件，以基于获取的模拟输入数据得到运行结果，其中，所述运行结果包括与所述模拟输入数据对应的模拟输出数据；

基于所述模拟输出数据确定所述待测试子任务的测试结果。

6.根据权利要求3所述的方法，其特征在于，所述方法还包括：

若所述执行结果为执行成功，则将所述目标执行文件发送至调度系统，以使所述调度系统基于所述目标执行文件执行所述目标数据处理任务。

7.根据权利要求6所述的方法，其特征在于，所述将所述目标执行文件发送至调度系统，包括：

确定所述目标数据处理任务对应的调度配置信息，其中，所述调度配置信息包括任务调度周期、任务调度资源以及监控配置信息中的至少一种；

将所述目标数据处理任务以及所述调度配置信息发送至所述调度系统，以使所述调度系统基于所述调度配置信息执行所述目标数据处理任务。

8.根据权利要求3所述的方法，其特征在于，所述运行所述目标执行文件，以基于获取的源数据得到与所述源数据对应的目标数据，包括：

运行所述目标执行文件，以基于所述目标执行文件中的数据源节点信息，获取与所述目标数据处理任务对应的源数据，其中，所述数据源节点信息包含所述源数据的来源信息；基于所述目标执行文件中的源数据转化信息，将所述源数据转化为预设数据格式的输入处理数据，并基于所述输入处理数据、所述目标执行文件中的算子节点信息以及所述目标执行文件中的连接关系信息，生成所述目标数据。