[发明专利]数据处理方法、装置、电子设备及存储介质

权利要求书

1.一种数据处理方法，其特征在于，所述方法包括：

获取各数据任务和各所述数据任务的依赖关系，其中，各所述数据任务分别在相应的数据处理平台进行处理；

根据各所述数据任务的依赖关系，基于十字链表数据结构将所述各数据任务进行存储，得到数据任务十字链表；

建立各所述数据任务对应的数据处理平台的接口调用进程；

根据所述数据任务十字链表，利用各所述接口调用进程调用各所述数据处理平台，以处理各所述数据任务。

2.根据权利要求1所述的方法，其特征在于，所述根据所述数据任务十字链表，利用各所述接口调用进程调用各所述数据处理平台，以处理各所述数据任务，包括：

根据所述数据任务十字链表中记录的各所述数据任务的依赖关系，从所述数据任务十字链表中获取当前待处理任务；

获取所述当前待处理任务相应的数据处理平台的接口调用进程，根据所述接口调用进程调用所述处理当前待处理任务相应的数据处理平台，以使所述当前待处理任务相应的数据处理平台处理所述当前待处理任务。

3.根据权利要求2所述的方法，其特征在于，在所述当前待处理任务在相应的数据处理平台处理后，所述方法还包括：

生成完成文件；

根据所述完成文件，从所述数据任务十字链表中获取下一待处理任务，所述下一待处理任务为所述当前待处理任务的下游任务；

获取所述下一待处理任务相应的数据处理平台的接口调用进程，根据所述接口调用进程调用所述处理下一待处理任务相应的数据处理平台，以使所述下一待处理任务相应的数据处理平台处理所述下一待处理任务。

4.根据权利要求1所述的方法，其特征在于，所述根据所述各数据任务的依赖关系，基于十字链表数据结构将所述各数据任务进行存储，得到数据任务十字链表，包括：

根据各所述数据任务的依赖关系将各所述数据任务作为节点顺序存储；

根据所述各数据任务的依赖关系，将各所述数据任务使用弧连接，使得各所述数据任务进行链式存储。

5.一种数据处理装置，其特征在于，所述装置包括：

第一获取模块，用于获取各数据任务和各所述数据任务的依赖关系，其中，各所述数据任务分别在相应的数据处理平台进行处理；

存储模块，用于根据各所述数据任务的依赖关系，基于十字链表数据结构将所述各数据任务进行存储，得到数据任务十字链表；

建立模块，用于建立各所述数据任务对应的数据处理平台的接口调用进程；

处理模块，用于根据所述数据任务十字链表，利用各所述接口调用进程调用各所述数据处理平台，以处理各所述数据任务。

6.根据权利要求5所述的装置，其特征在于，所述处理模块具体用于：

根据所述数据任务十字链表中记录的各所述数据任务的依赖关系，从所述数据任务十字链表中获取当前待处理任务；

获取所述当前待处理任务相应的数据处理平台的接口调用进程，根据所述接口调用进程调用所述处理当前待处理任务相应的数据处理平台，以使所述当前待处理任务相应的数据处理平台处理所述当前待处理任务。

7.根据权利要求6所述的装置，其特征在于，所述装置还包括：

生成模块，用于生成完成文件；

第二获取模块，用于根据所述完成文件，从所述数据任务十字链表中获取下一待处理任务，所述下一待处理任务为所述当前待处理任务的下游任务；

第三获取模块，用于获取所述下一待处理任务相应的数据处理平台的接口调用进程，根据所述接口调用进程调用所述处理下一待处理任务相应的数据处理平台，以使所述下一待处理任务相应的数据处理平台处理所述下一待处理任务。

8.根据权利要求5所述的装置，其特征在于，所述存储模块具体用于：

根据各所述数据任务的依赖关系将各所述数据任务作为节点顺序存储；

根据所述各数据任务的依赖关系，将各所述数据任务使用弧连接，使得各所述数据任务进行弧链式存储。