[发明专利]面向教育领域的数据追溯方法、系统、设备及存储介质

说明书

本发明公开了一种面向教育领域的数据追溯方法，包括：获取并存储数据提供方上传的原始数据表；将原始数据表转化为标准数据表，并存储在标准库，根据预设数据标准规则生成标准数据关联规则；将标准数据表转化为主题数据表，并存储在主题库，根据预设数据主题规则生成主题数据关联规则；根据上述表及关联规则建立元数据全周期链路；获取数据修改指令，根据数据修改指令修改数据，并更新元数据全周期链路；获取数据查询指令，根据数据查询指令及元数据全周期链路进行数据展示或质量检核。相应地，本发明还公开了实现上述方法的系统、设备及可读存储介质。采用本发明，可提高数据追溯的广度及准确度，从而改善数据质量。

技术领域

本发明涉及一种数据库技术，尤其涉及面向教育领域的数据追溯方法、系统、设备及存储介质。

背景技术

随着高校信息化建设的推进，高校数据库系统的从基础信息系统建设转向综合数据应用。近些年高校除了建设各个部门的业务系统外，还会建设综合性的数据库，如标准库、主题库等，方便不同业务部门之间的共享数据，提高数据综合应用程度以及数据利用效率。数据在业务系统及综合应用的共享库之间进行交换的过程中对数据进行追溯是提高数据质量、改善数据治理的重要内容。

现有的数据追溯方法许多基于表级别建立元数据链路，存在数据定位不清晰、质量检核精度不足等缺点。部分表级别数据追溯方法通过读取数据库操作指令生成元数据链路，没有针对业务系统的特点，实用性较差。还有一些数据追溯方法虽然在特定部门的业务系统建立元数据链路，但无法建立跨部门业务系统的更广泛的元数据链路，导致无法检查数据在跨部分的业务系统流转时出现的错误。

发明内容

本发明所要解决的技术问题在于，提供面向教育领域的数据追溯方法、系统、设备及存储介质，可提高数据追溯的广度及准确度，从而改善数据质量。

为了解决上述技术问题，本发明提供了一种面向教育领域的数据追溯方法，包括：获取数据提供方上传的原始数据表，将原始数据表存储在原始库；根据预设数据标准规则将原始数据表转化为标准数据表，将标准数据表存储在标准库，并根据预设数据标准规则生成标准数据关联规则；根据预设数据主题规则将标准数据表转化为主题数据表，将主题数据表存储在主题库，并根据预设数据主题规则生成主题数据关联规则；根据原始数据表、标准数据表、主题数据表、标准数据关联规则及主题数据关联规则建立元数据全周期链路；获取数据修改指令，根据数据修改指令修改数据，并更新元数据全周期链路；获取数据查询指令，根据数据查询指令及元数据全周期链路进行数据展示或质量检核。

作为上述方案的改进，根据原始数据表、标准数据表、主题数据表、标准数据关联规则及主题数据关联规则建立元数据全周期链路的步骤包括：根据标准数据关联规则建立原始数据表中的字段与标准数据表中的字段的映射关系，生成第一映射表；根据主题数据关联规则建立标准数据表中的字段与主题数据表中的字段的映射关系，生成第二映射表；将第一映射表及第二映射表中标准数据表字段相同的映射关系组合成元数据全周期链路。

作为上述方案的改进，数据查询指令包括定位指令，定位指令中包含定位字段标识及定位库标识；当获取的数据查询指令为定位指令时，根据数据查询指令及元数据全周期链路进行数据展示或质量检核的步骤包括：根据定位字段标识提取元数据全周期链路，并进一步提取该元数据全周期链路中与定位库标识匹配的字段。

作为上述方案的改进，数据查询指令还包括质量检核指令，质量检核指令中包含有质检字段标识；当获取的数据查询指令为质量检核指令时，根据数据查询指令及元数据全周期链路进行数据展示或质量检核的步骤包括：根据质检字段标识提取元数据全周期链路，并对元数据全周期链路进行比较；判断元数据全周期链路中是否有存在两个字段不相等，判断为是，显示警报信息。