[发明专利]数据检测的方法、装置、可读存储介质以及电子设备

权利要求书

1.一种数据检测的方法，其特征在于，待检测数据是通过若干数据处理节点执行数据处理任务后得到的，所述方法包括：

获取待检测数据；

针对每个数据处理节点，确定该数据处理节点在执行针对所述待检测数据的数据处理任务时的处理参数；

根据所述处理参数，确定该数据处理节点在执行所述数据处理任务时的状态检测结果，作为当前状态检测结果；

根据所述待检测数据、保存的已检测数据、所述各数据处理节点的当前状态检测结果和历史状态检测结果，确定所述待检测数据与各数据处理节点的相关系数，针对每个数据处理节点，若该数据处理节点与所述待检测数据之间的相关系数越大，则所述待检测数据与该数据处理节点之间的相关性越大,该数据处理节点对所述待检测数据的影响越高；

根据所述相关系数以及各数据处理节点的当前状态检测结果，确定针对所述待检测数据的综合质量检测结果；

根据所述综合质量检测结果，对所述待检测数据进行数据检测。

2.如权利要求1所述的方法，其特征在于，根据所述待检测数据、保存的已检测数据、所述各数据处理节点的当前状态检测结果和历史状态检测结果，确定所述待检测数据与各数据处理节点的相关系数，具体包括：

根据保存的已检测数据以及所述待检测数据，确定数据质检结果向量；

根据保存的历史状态检测结果以及所述当前状态检测结果，确定状态检测结果矩阵；

根据所述数据质检结果向量以及所述状态检测结果矩阵，确定所述待检测数据与各数据处理节点的相关系数。

3.如权利要求2所述的方法，其特征在于，根据保存的已检测数据以及所述待检测数据，确定数据质检结果向量，具体包括：

获取保存的设定个数的历史时间点的已检测数据；

针对每个历史时间点，以该历史时间点作为目标历史时间点，并根据所述目标历史时间点的已检测数据以及位于所述目标历史时间点之前的历史时间点的已检测数据，确定所述目标历史时间点的已检测数据对应的历史数据质检结果；

根据所述待检测数据以及至少一个历史时间点对应的已检测数据，确定所述待检测数据对应的当前数据质检结果；

根据各历史时间点的已检测数据对应的历史数据质检结果，以及所述待检测数据对应的当前数据质检结果，确定数据质检结果向量。

4.如权利要求3所述的方法，其特征在于，根据保存的历史状态检测结果以及所述当前状态检测结果，确定状态检测结果矩阵，具体包括：

针对每个已检测数据，获取各数据处理节点在执行针对该已检测数据的数据处理任务时的历史状态检测结果；

以所述设定个数的历史时间点为维度，对各数据处理节点针对每个已检测数据的历史状态检测结果以及所述当前状态检测结果进行排布，确定状态检测结果矩阵。

5.如权利要求2所述的方法，其特征在于，根据所述数据质检结果向量以及所述状态检测结果矩阵，确定所述待检测数据与各数据处理节点的相关系数，具体包括：

根据所述数据质检结果向量以及所述状态检测结果矩阵，确定所述待检测数据与各数据处理节点的皮尔逊相关系数，作为所述待检测数据与各数据处理节点的相关系数。

6.如权利要求1或5所述的方法，其特征在于，根据所述相关系数以及各数据处理节点的当前状态检测结果，确定针对所述待检测数据的综合质量检测结果，具体包括：

根据所述相关系数，确定各数据处理节点针对所述待检测数据所对应的权重；

根据各数据处理节点对应的权重以及各数据处理节点的当前状态检测结果，确定针对所述待检测数据的综合质量检测结果。

7.如权利要求6所述的方法，其特征在于，根据所述相关系数，确定各数据处理节点针对所述待检测数据的权重，具体包括：

根据预设的逻辑树结构，确定所述逻辑树结构中各叶子节点之间的父子关系，叶子节点包括数据处理节点以及虚拟处理节点；

针对每个叶子节点，根据该叶子节点作为父节点时对应的子节点的相关系数，确定该叶子节点针对所述待检测数据的权重。