[发明专利]删除中间层数据的方法、系统和装置

权利要求书

1.一种删除数据加工时产生的中间层数据的方法，其中，包括：

在执行数据加工任务时，根据数据血缘关系，建立具有多个节点的数据血缘关系树型结构图；

根据所述血缘关系树型结构图，建立节点之间的父子关系表；

记录数据加工完成日志，所述日志至少包括一个或多个完成节点；

分析所述数据加工完成日志的完成节点，根据所述完成节点，从所述父子关系表中查询得到所述完成节点的父节点；

根据所述父节点查询所述数据加工完成日志，判断所述数据加工完成日志中是否包含了所述完成节点的父节点，如果包含，删除所述完成节点的数据，并从所述数据加工完成日志中删除所述完成节点。

2.如权利要求1所述的删除数据加工时产生的中间层数据的方法，其中，所述数据加工完成日志还包括完成节点对应的完成时间。

3.如权利要求2所述的删除数据加工时产生的中间层数据的方法，其中，所述分析所述数据加工完成日志的完成节点的步骤包括：

按完成节点的完成时间，从完成时间最早的完成节点开始分析。

4.如权利要求1所述的删除数据加工时产生的中间层数据的方法，其中，血缘关系树型结构图包括多个代表源数据的叶子节点、多个代表中间层数据的中间节点和一个代表目标数据的根节点；

所述数据节点加工完成日志中的完成节点为中间节点或根节点。

5.如权利要求4所述的删除数据加工时产生的中间层数据的方法，其中，从所述父子关系表中查询所述完成节点的父节点之前，判断所述完成节点是否为根节点，如果不是根节点，查询所述完成节点的父节点，如果是根节点，结束对该完成节点的分析。

6.如权利要求4所述的删除数据加工时产生的中间层数据的方法，其中，所述父节点为一个或多个，当为多个时，在所述判断所述数据加工完成日志中是否包含了所述完成节点的父节点步骤中，判断数据加工完成日志中是否包含了所述完成节点的所有父节点，在数据加工完成日志中包含了所述完成节点的所有父节点时，删除所述完成节点的数据，并从所述数据加工完成日志中删除所述完成节点。

7.一种删除数据加工时产生的中间层数据的系统，其中，包括：

数据血缘关系树型结构图建立模块，用于根据数据加工任务的数据，建立数据血缘关系树型结构图；

父子关系表建立模块，与所述数据血缘关系树型结构图建立模块相连接，用于根据所述数据血缘关系树型结构图，建立节点之间的父子关系表；

数据加工完成日志记录模块，用于记录在数据加工任务时，完成数据加工的完成节点；

中间层扫描模块，分析数据加工完成日志中的完成节点，确定可以删除的节点；和

删除模块，用于根据所述中间层扫描模块发送的触发信息，删除完成节点数据，并从数据加工完成日志中删除所述完成节点。

8.如权利要求7所述的删除数据加工时产生的中间层数据的系统，其中，所述中间层扫描模块包括：

节点提取单元，用于从所述数据加工完成日志中提取待分析的完成节点；

查询单元，用于根据所述待分析的完成节点，从所述父子关系表中获取与其对应的父节点，并根据所述父节点，查询所述数据加工完成日志，确定所述数据加工完成日志是否包含了所述父节点；和

删除触发单元，用于在当所述数据加工完成日志包含了所述父节点时，向所述删除模块发送触发信息。