[发明专利]一种水文传感器数据质量评估的模型与系统

权利要求书

1.一种水文传感器数据质量评估的模型，其特征在于，包括：

M(Model)：数据质量评估模型，即

M＝D，I，R，G

D(DataSet)：需要评估的水文传感器数据集。

I(Indicator)：评估数据集D时选择的指标集，指标集包括正确性、完整性、唯一性和有效性四个指标，针对同一数据集，可选择多个指标进行评估，各指标的含义为：

①正确性：传感器数据在采集、传输、转存等过程中是否发生错误，所记录的数据是否符合客观事实。

②完整性：描述传感器数据是否存在缺失记录或缺失字段，反应数据记录客观事实的完备程度。

③唯一性：描述匹配的水文数据在数据源中唯一存在的程度，即是否存在重复记录。

④有效性：描述传感器数据取值是否在用户定义的值域内。

R(Rule)：对各指标I设置的具体规则集合，一个指标可以包含多个规则。

G(Goal)：数据集在各指标和规则下评估后，根据计算公式所计算出的得分，得分的大小反映了评估数据集质量的高低，各指标综合评估得分的计算公式为：

其中，G_t表示第t个指标的评估得分；R表示指标i所包含的规则个数；N为数据集总记录数；D_i表示第i条记录；F_ij表示第i条记录第j个规则的规则函数，若该记录满足规则，则F_ij的值为1，否则值为0。

每个数据集在质量评估时可选择多个指标进行评估，故需要根据用户对每个指标的重视程度计算出数据集质量指标评估的综合得分，计算方式为：

其中，C为评估数据集时所选择的指标个数，W_j为指标的权重，且权重值由用户自定义，反应用户对各指标的重视程度。

2.一种水文传感器数据质量评估的系统，其特征在于，包括：

数据收集模块，收集水文传感器数据，并清除无效数据；

数据评估模块，选取不同的评估指标，并对各指标设置规则，规则设置完毕后对待评估的数据集进行质量评估，其具体步骤为：

步骤1：选择需要评估的数据集；

步骤2：根据指标集选择合适的指标，并确定分析任务；

步骤3：根据规则集为每个指标确定约束规则；

步骤4：对每个规则进行规则检查，并记录检查结果；

步骤5：根据数据质量评估模型和步骤4的检查结果对数据集进行质量评估，并记录评估结果。

评估结果展示模块，此模块用以展示评估结果，包括评估任务的概要信息、违反规则信息、评估指标信息和评估得分情况。