[发明专利]一种数据质量评估方法及系统

权利要求书

1.一种数据质量评估方法，其特征在于，所述方法包括：

提取待进行数据质量评估的医院数据库表元数据信息，补充完善该表的数据模型和显示模型；

将补充完善完成的数据模型和显示模型中的表信息添加到数据资产列表中，成为确定待设置质量检查的对象列表；

通过显示模型可浏览一个表对象的数据信息，通过可维护的检查规则逐一对表对象中的列进行检查规则配置，一个列得到至少一个列检查视图；

针对表可以设置多个表检查方案，一个表检查方案可以对应多个不同的列检查视图，通过对表检查方案的执行得到表的数据质量分数和列所属数据质量级别；

针对数据资产可以设置多个评估方案，不同的评估方案可以对应多个不同的表检查方案，通过对评估方案的执行得到本次评估数据质量分数和表所属数据质量级别。

2.根据权利要求1所述的方法，在一个表检查方案中可以设置列的质量权重和质量级别范围，其特征在于，所述一个表检查方案可以对应多个不同的列检查视图，通过对表检查方案的执行得到表的数据质量分数和列所属数据质量级别，还包括：

所述数据资产列表中可以有多个检查方案，每个检查方案都可以由不同的列检查视图组成，每个检查方案中的列检查视图权重都可以不同、质量级别范围不同；

具体地，可以对表检查方案执行，通过逐一将表检查方案中的列检查视图动态生成SQL语句，对表对象的业务数据进行查询得到检出问题数量，通过检出问题数量与检查记录数得到正确率；

根据所述正确率与列的质量权重得到检查视图的字段得分和列质量级别，通过各个字段得分之和得到表检查方案得分和各列质量级别。

3.根据权利要求1所述的方法，其特征在于，确定表检查方案所对应的列检查视图，根据确定的列检查视图形成至少一个表检查方案，包括：

通过第一公式形成所述表检查方案，其中，第一公式具体包括：

N＝Sum(Fv₁×w₁+Fv₂×w₂+…+Fv_n×w_n)

其中，N表示表检查方案本次执行得分，所述表检查方案得分用于表征所述检查方案的质量，Sum表示每个列检查视图的字段得分合计，n表示第n个检查视图，Fv表示列检查视图得分，w表示列检查视图在该表质量检查方案的权重。

4.根据权利要求1所述的方法，在一个评估方案中可以设置表检查方案质量权重和质量级别范围，其特征在于，可以设置多个评估方案，每一个评估方案可以对应多个不同的表检查方案，每个评估方案中的表检查方案权重都可以不同、质量级别范围不同，还包括：

通过表检查方案的质量权重得到表检查方案得分和质量级别，并根据表检查方案得分之和得到评估方案得分和各表质量级别，包括根据第二公式得到评估方案的质量得分，其中，第二公式具体包括：

M＝Sum(Tv₁×w₁+Tv₂×w₂+…+Tv_m×w_m)

M代表本次执行评估方案的质量得分，Tv代表表检查方案的质量得分，w代表表检查方案在本评估方案中的权重，m表示第m个表检查方案。

5.根据权利要求1所述的方法，其特征在于，所述列检查规则至少包括空值检查、字典检查、SQL检查等可维护检查规则中的一项。

6.根据权利要求1所述的方法，其特征在于，提取待进行数据质量评估的数据库表元数据信息，补充完善该表的数据模型和显示模型，包括：

数据模型设置和显示模型设置，通过这两个模型的设置，可以实现对任意要评估的表/视图对象做可视化列质量规则设置，也可以实现表数据的可视化增删改查操作。

7.根据权利要求1所述的方法，其特征在于，所述数据模型的窗口列表包括列基本信息以及检查规则信息，所述列基本信息至少包括列序号、显示名称、列名称、列数据类型、长度以及是否可空，所述检查规则信息中包括预设的检查规则。