[发明专利]数据血缘分析方法、装置、计算机设备及存储介质

说明书

本申请属于数据分析技术领域，涉及一种数据血缘分析方法、装置、计算机设备及存储介质，该方法包括通过获取需要可视化的目标数据节点，判断目标数据节点是否存在上游数据节点和下游数据节点；若存在，获取上游数据节点和下游数据节点的数据血缘关系，基于数据血缘关系，对上游数据节点和下游数据节点进行数据溯源，获取目标数据节点的最初数据节点以及目标数据节点的最终数据节点，得到目标数据节点的全链路流转血缘图，利用可视化界面展示目标数据节点的全链路流转血缘图。本申请还提供一种数据血缘分析。本申请通过可视化界面展示全链路流转血缘图，以将一次性地目标数据节点及其上、下游节点全部呈现出来，更加直观、友好。

技术领域

本申请涉及数据分析技术领域，尤其涉及数据血缘分析方法、装置、计算机设备及存储介质。

背景技术

大数据时代，数据爆发性增长，海量的、各种类型的数据均在快速地产生，而这些庞大且复杂的数据信息经过抽取、转换、加载后又生成新的数据。在这个过程中，数据与数据之间产生的链接，称为大数据血缘，它具有归属性、多源性、可追溯性和多样性的特征，可用于数据溯源、数据价值评估、数据归档和销毁的参考，可为企业对大数据资产的治理提供价值。而可视化技术是利用计算机图形学和图像技术，将数据转化为图形或图像在屏幕上展示出来，再通过交互处理，从而帮助企业分析、获取有效信息的理论、方法和技术。通过将可视化技术应用到数据血缘的分析上，能够帮助企业直观地展示数据是如何流转的，为数据管理提供依据。

现有的数据血缘可视化方法中，一般是基于单个数据节点的血缘可视化，即只展示待观察数据节点和其上下游节点，而不呈现其上下游节点本身的上下游关系，这种方法虽然直观清晰，但是展示的血缘信息有限。

发明内容

本申请实施例的目的在于提出一种数据血缘分析方法、装置、计算机设备及存储介质，以解决目前可视化技术展示的血缘信息有限的技术问题。

为了解决上述技术问题，本申请实施例提供一种数据血缘分析方法，包括下述步骤：

获取需要可视化的目标数据节点；

判断所述目标数据节点是否存在上游数据节点和下游数据节点；

若存在，获取所述上游数据节点和所述下游数据节点的数据血缘关系；

基于所述数据血缘关系，对所述上游数据节点和所述下游数据节点进行数据溯源，并获取所述目标数据节点的最初数据节点以及所述目标数据节点的最终数据节点，得到所述目标数据节点的全链路流转血缘图；

利用可视化界面展示所述目标数据节点的全链路流转血缘图。

进一步的，在所述判断所述目标数据节点是否存在上游数据节点和下游数据节点的步骤之后，还包括：

若不存在所述上游数据节点且存在所述下游数据节点，则获取所述下游数据节点的数据血缘关系，其中，所述目标数据节点作为所述最初数据节点；

若存在所述上游数据节点且不存在所述下游数据节点，则获取所述上游数据节点的数据血缘关系，其中，所述目标数据节点作为最终数据节点；

若不存在所述上游数据节点和所述下游数据节点，所述目标数据节点作为所述最初数据节点和所述最终数据节点。

进一步的，在所述上游数据节点和所述下游数据节点均为多个时，所述基于所述数据血缘关系，对所述上游数据节点和所述下游数据节点进行数据溯源，并获取所述目标数据节点的最初数据节点以及所述目标数据节点的最终数据节点的步骤，具体包括：

基于所述数据血缘关系，对各个所述上游数据节点进行向上溯源的操作，并获取各个所述上游数据节点的所述最初数据节点；

基于所述数据血缘关系，对各个所述下游数据节点进行向下探测的操作，并获取各个所述下游数据节点的所述最终数据节点。