[发明专利]数据处理方法、装置、存储介质及电子设备

说明书

本申请实施例公开了一种数据处理方法、装置、存储介质及电子设备，其中，本申请实施例获取目标数据，计算所述目标数据在多个质量评估指标上的评估值；获取所述多个质量评估指标的预设阈值；根据所述评估值和所述预设阈值检测所述目标数据在所述质量评估指标上是否满足预设条件，并生成检测结果；根据所述检测结果，从预设的多个数据处理单元中，调用不满足预设条件的质量评估指标对应的数据处理单元，对所述目标数据进行处理。本申请实现基于数据质量的自适应地调用相应的数据处理单元，能够避免调用无关的数据处理单元，显著降低了终端的资源消耗。

技术领域

本申请涉及数据处理技术领域，具体涉及一种数据处理方法、装置、存储介质及电子设备。

背景技术

数据层架构对采集的数据的清洗方法，大多数都采用固定的方式，具有统一的结构，采用统一的处理方式对数据存在的质量问题进行处理。事实上，不同的数据，质量不同，存在的问题也不尽相同。例如，数据A存在缺失问题，但是数据噪声较低，所以只需解决数据A的缺失问题即可，无需经过噪声处理模块；而数据B存在噪声大，但数据完整度高，所以只需解决数据B的噪声问题，无需解决经过缺失处理模块。综上所述，现有的数据处理方式灵活性低、容易造成资源浪费。

发明内容

本申请实施例提供了一种数据处理方法、装置、存储介质及电子设备，能够根据数据质量自适应地调整数据处理方式，实现节约资源。

第一方面，本申请实施例了提供了的一种数据处理方法，包括：

获取目标数据，计算所述目标数据在多个质量评估指标上的评估值；

获取所述多个质量评估指标的预设阈值；

根据所述评估值和所述预设阈值检测所述目标数据在所述质量评估指标上是否满足预设条件，并生成检测结果；

根据所述检测结果，从预设的多个数据处理单元中，调用不满足预设条件的质量评估指标对应的数据处理单元，对所述目标数据进行处理。

第二方面，本申请实施例了提供了的一种数据处理装置，包括：

评估值计算模块，用于获取目标数据，计算所述目标数据在多个质量评估指标上的评估值；

阈值获取模块，用于获取所述多个质量评估指标的预设阈值；

质量检测模块，用于根据所述评估值和所述预设阈值检测所述目标数据在所述质量评估指标上是否满足预设条件，并生成检测结果；

数据处理模块，用于根据所述检测结果，从预设的多个数据处理单元中，调用不满足预设条件的质量评估指标对应的数据处理单元，对所述目标数据进行处理。

第三方面，本申请实施例提供的存储介质，其上存储有计算机程序，当所述计算机程序在计算机上运行时，使得所述计算机执行如本申请任一实施例提供的数据处理方法。

第四方面，本申请实施例提供了一种电子设备，包括处理器和存储器，所述存储器有计算机程序，所述处理器通过调用所述计算机程序，用于执行如本申请任一实施例提供的数据处理方法。

本申请实施例提供的技术方案，获取目标数据，计算目标数据在多个质量评估指标上的评估值，获取多个质量评估指标的预设阈值，根据评估值和预设阈值检测目标数据在质量评估指标上是否满足预设条件，并生成检测结果，根据检测结果，有针对性地从预设的多个数据处理单元中，调用不满足预设条件的质量评估指标对应的数据处理单元，对目标数据进行处理，通过这种方式实现了基于数据质量自适应地选择部分数据处理单元对数据处理，针对不同的数据采取不同的处理方式，极大地提高了数据处理的灵活度，并且能够避免调用无关的数据处理单元，显著降低终端的资源消耗，提升用户使用体验。

附图说明