[发明专利]一种数据处理方法、装置、设备和存储介质

说明书

本发明实施例公开了一种数据处理方法、装置、设备和存储介质，该方法包括：获取数据仓库中的目标数据，目标数据是用于描述数据仓库中数据模型的元数据；根据目标数据确定数据模型的数据价值度；根据数据价值度对数据模型对应的模型数据进行处理。通过本发明实施例的技术方案，可以实现数据的自动化处理，提高数据处理效率，以及提升数据价值密度。

技术领域

本发明实施例涉及计算机技术，尤其涉及一种数据处理方法、装置、设备和存储介质。

背景技术

随着人工智能、移动互联网和物联网的兴起，大数据越变越大。大数据行业的迅猛发展给企业的数据管理工作带来了挑战。

目前，数据处理主要集中在对无用数据的清理。现有技术中数据处理的方式是根据工作经验，通过人工筛选方式，确定出疑似无用数据，并由数据负责人确认后，将这些无用数据进行删除。

然而，在实现本发明过程中，发明人发现现有技术中至少存在如下问题：

现有技术中的数据处理方式需要耗费大量的人力，并且处理周期较长，大大降低了数据处理效率。

发明内容

本发明实施例提供了一种数据处理方法、装置、设备和存储介质，以实现数据的自动化处理，提高数据处理效率，以及提升数据价值密度。

第一方面，本发明实施例提供了一种数据处理方法，包括：

获取数据仓库中的目标数据，所述目标数据是用于描述所述数据仓库中数据模型的元数据；

根据所述目标数据确定所述数据模型的数据价值度；

根据所述数据价值度对所述数据模型对应的模型数据进行处理。

第二方面，本发明实施例还提供了一种数据处理装置，包括：

目标数据获取模块，用于获取数据仓库中的目标数据，所述目标数据是用于描述所述数据仓库中数据模型的元数据；

数据价值度确定模块，用于根据所述目标数据确定所述数据模型的数据价值度；

数据处理模块，用于根据所述数据价值度对所述数据模型对应的模型数据进行处理。

第三方面，本发明实施例还提供了一种设备，所述设备包括：

一个或多个处理器；

存储器，用于存储一个或多个程序；

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明任意实施例所提供的数据处理方法步骤。

第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明任意实施例所提供的数据处理方法步骤。

上述发明中的实施例具有如下优点或有益效果：

通过根据用于描述数据仓库中数据模型的元数据，可以确定出数据模型的数据价值度，并根据该数据价值度可以自动化处理数据模型对应的模型数据，以便删除无用数据，避免无用数据持续进行加工和存储，浪费存储及计算资源，从而可以提升数据仓库中的数据价值密度，同时也提高了数据处理效率。

附图说明

图1是本发明实施例一提供的一种数据处理方法的流程图；

图2是本发明实施例一所涉及的一种同步任务的处理方式的示例；

图3是本发明实施例一所涉及的一种在雷达图中数据模型的数据价值度的示例；

图4是本发明实施例二提供的一种数据处理方法的流程图；