[发明专利]数据存储方法、装置及电子设备

说明书

本申请提供一种数据存储方法、装置及电子设备，所述方法的一具体实施方式包括：获取目标源数据表中待存储的目标数据；对所述目标数据进行检测，得到检测结果；若所述检测结果指示所述目标数据异常，针对所述目标数据执行预设的修复操作；若所述检测结果指示所述目标数据正常，将所述目标数据存储至数据仓库。该实施方式能够对待存储的目标数据进行检测，在该目标数据正常时，才将该目标数据存入数据仓库，在该目标数据异常时，需要对该目标数据进行修复，避免了将异常的数据加载到数据仓库中，提高了数据仓库的数据质量。

技术领域

本申请涉及数据仓库技术领域，特别涉及一种数据存储方法、装置及电子设备。

背景技术

随着大数据技术的不断发展，数据仓库的建设也变得越来越重要。目前来说，在进行数据仓库建设的过程中，首先将业务系统的数据经过抽取、清洗转换之后加载到目标系统中，以便将分散、零乱、标准不统一的数据整合到一起进行数据仓库的建设。但是，可能会将异常的数据加载到数据仓库中，从而影响了整个数据仓库的数据质量。

发明内容

为了解决上述技术问题之一，本申请提供一种数据存储方法、装置及电子设备。

根据本申请实施例的第一方面，提供一种数据存储方法，包括：

获取目标源数据表中待存储的目标数据；

对所述目标数据进行检测，得到检测结果；

若所述检测结果指示所述目标数据异常，针对所述目标数据执行预设的修复操作；

若所述检测结果指示所述目标数据正常，将所述目标数据存储至数据仓库。

可选的，所述对所述目标数据进行检测，包括：

获取所述目标源数据表对应的验证规则；

基于所述验证规则对所述目标数据进行检测。

可选的，所述验证规则与所述目标源数据表对应的业务类型相匹配。

可选的，所述对所述目标数据进行检测，包括：

确定与所述目标源数据表有业务关联的参考源数据表；

获取与所述目标源数据表及所述参考源数据表匹配的业务关联规则；

基于所述目标数据及所述参考源数据表中的数据获取针对所述业务关联规则的目标指标；

按照所述业务关联规则验证所述目标指标，以对所述目标数据进行检测。

可选的，所述针对所述目标数据执行预设的修复操作，包括：

向所述目标源数据表对应的业务端发送数据修复请求，以请求修复所述目标数据。

可选的，若所述检测结果指示所述目标数据异常，所述方法还包括：

将所述目标数据存储至预设的第一临时数据表，并对所述目标数据进行异常标记。

可选的，所述将所述目标数据存储至数据仓库，包括：

若基于所述第一临时数据表中经过异常标记的数据，确定所述目标数据与所述第一临时数据表无关联，则将所述目标数据存储至预设的第二临时数据表；

若基于所述第一临时数据表中经过异常标记的数据，确定所述目标数据与所述第一临时数据表有关联，则将所述目标数据存储至所述第一临时数据表，并对所述目标数据进行正常标记；

在预设的触发时刻，将存储于所述第二临时数据表中的所述目标数据存储至数据仓库，或者，将存储于所述第一临时数据表中且经过正常标记的所述目标数据存储至数据仓库。

根据本申请实施例的第二方面，提供一种数据存储装置，包括：