[发明专利]数据处理方法、装置、存储介质及电子设备

权利要求书

1.一种数据处理方法，其特征在于，包括：

获取目标数据，计算所述目标数据在多个质量评估指标上的评估值；

获取所述多个质量评估指标的预设阈值；

根据所述评估值和所述预设阈值检测所述目标数据在所述质量评估指标上是否满足预设条件，并生成检测结果；

根据所述检测结果，从预设的多个数据处理单元中，调用不满足预设条件的质量评估指标对应的数据处理单元，对所述目标数据进行处理。

2.如权利要求1所述的数据处理方法，其特征在于，根据所述检测结果，从预设的多个数据处理单元中，调用不满足预设条件的质量评估指标对应的数据处理单元，对所述目标数据进行处理的步骤之后，所述方法还包括：

计算经过处理后的所述目标数据在所述多个质量评估指标上的评估值；

基于计算得到的评估值，返回执行根据所述评估值和所述预设阈值判断所述目标数据是否在所述质量评估指标上满足预设条件的步骤，直至所述目标数据在所述质量评估指标上全部满足预设条件。

3.如权利要求1所述的数据处理方法，其特征在于，获取所述多个质量评估指标的预设阈值的步骤，包括：

获取所述目标数据的数据类型或用途；

根据所述数据类型或用途，确定所述质量评估指标的预设阈值。

4.如权利要求1至3任一项所述的数据处理方法，其特征在于，根据检测结果，从预设的多个数据处理单元中，调用不满足预设条件的质量评估指标对应的数据处理单元的步骤，包括：

根据检测结果生成调度规则，其中，一个质量评估指标对应一个数据处理单元；

按照所述调度规则，从预设的多个数据处理单元中，调用不满足预设条件的质量评估指标对应的数据处理单元。

5.如权利要求4所述的数据处理方法，其特征在于，根据所述评估值和所述预设阈值检测所述目标数据在所述质量评估指标上是否满足预设条件，生成检测结果的步骤，包括：

分别对比所述质量评估指标对应的所述评估值与所述预设阈值的大小；

若所述评估值大于所述预设阈值，则判定所述目标数据在对应的质量评估指标上满足预设条件；

若所述评估值不大于所述预设阈值，则判定所述目标数据在对应的所述质量评估指标上不满足预设条件；

根据检测结果生成调度规则的步骤，包括：

将不满足预设条件的所述质量评估指标对应的调度值设置为1，将满足预设条件的所述质量评估指标对应的调度值设置为0；

根据所述多个质量评估指标对应的调度值生成所述调度规则。

6.如权利要求1所述的数据处理方法，其特征在于，所述质量评估指标包括所述目标数据的波动程度、冗余度、缺失程度和噪声程度；计算所述目标数据在多个质量评估指标上的评估值的步骤包括：

计算所述目标数据的方差，根据所述方差确定所述目标数据的波动程度，其中，方差与波动程度成正比；

计算目标数据中的相邻数据之间的差值，根据所述差值确定冗余数据的数量，根据所述冗余数据的数量计算所述冗余度；

查找所述目标数据中空值的数量，根据所述空值的数量确定所述缺失程度；

计算所述目标数据中的均值，并计算所述目标数据中大于所述均值的预设倍数的数据的数量，并根据偏离所述均值的数据的数量计算所述噪声程度。

7.一种数据处理装置，其特征在于，包括：

评估值计算模块，用于获取目标数据，计算所述目标数据在多个质量评估指标上的评估值；

阈值获取模块，用于获取所述多个质量评估指标的预设阈值；

质量检测模块，用于根据所述评估值和所述预设阈值检测所述目标数据在所述质量评估指标上是否满足预设条件，并生成检测结果；

数据处理模块，用于根据所述检测结果，从预设的多个数据处理单元中，调用不满足预设条件的质量评估指标对应的数据处理单元，对所述目标数据进行处理。

8.如权利要求7所述的数据处理装置，其特征在于，所述阈值获取模块还用于：获取所述目标数据的数据类型或用途；根据所述数据类型或用途，确定所述质量评估指标的预设阈值。