[发明专利]一种用于电力交易数据仓库的质量管控方法及其管控系统

权利要求书

1.一种用于电力交易数据仓库的质量管控方法，其特征在于，所述方法包括下述步骤：

(1)定义校验元数据和校验规则；

(2)设置校验任务；

(3)执行校验服务；

(4)发布数据校验结果；

(5)处理跟踪质量问题。

2.如权利要求1所述的质量管控方法，其特征在于，所述步骤(1)中，包括元数据信息设置；数据项是指数据仓库中数据表的值域，其元数据包括非空校验、零校验、是否进行范围校验、最大值、最小值和引用范围校验；数据集是指数据仓库中的一个表，其元数据包括数据频率、时间格式以及数据集维护人信息；通过元数据信息，实现数据本身的合理性校验。

3.如权利要求1所述的质量管控方法，其特征在于，所述步骤(1)中，包括设置校验规则；基于数据库表域名技术，实现数据仓库模型选择器，支持对数据集中数据的选择和过滤条件的设置，形成动态查询语句；通过运算符连接动态查询语句，实现数据校验规则定义；元数据校验通过校验规则设定，不需要设置规则表达式，系统直接调用元数据信息。

4.如权利要求1所述的质量管控方法，其特征在于，所述步骤(1)中，校验规则定义包括及时性校验的时间定义；时间表达式包括时间类型和时间值；时间类型包括绝对时间和相对时间，绝对时间的格式为年/月/日/时/分；相对时间以小时为单位；时间表达式运用于校验规则中。

5.如权利要求1所述的质量管控方法，其特征在于，所述步骤(2)中，校验任务与一个或多个校验规则关联，共享任务执行时间和执行频率。

6.如权利要求1所述的质量管控方法，其特征在于，所述步骤(3)中，校验任务由后台进程周期扫描，如果满足执行时间要求，则触发任务，解析关联的校验规则并执行逻辑判断，并记录校验结果。

7.如权利要求1所述的质量管控方法，其特征在于，所述步骤(4)中，校验结果结合消息机制，通过邮件或者短信接口，自动发送至数据集的维护人，提醒维护人员尽快处理。

8.如权利要求1所述的质量管控方法，其特征在于，所述步骤(5)中，为数据质量的解决过程设计了反馈和跟踪机制，加强了对质量问题的管控智能。

9.一种如权利要求1-8中任一项所述的用于电力交易数据仓库的质量管控方法的管控系统，其特征在于，所述系统包括：

<1>校验规则设置模块：包括元数据信息设置模块、校验规则配置模块和及时性时间定义模块，用于设置数据集的数据项本身、同一个数据集的数据项之间以及不同数据集的数据项之间的数据校验规则；

<2>校验任务管理模块：用于设置校验任务参数，所述校验任务参数包括关联的校验规则、校验类型、告警级别、任务执行时间、告警通知方式和通知时间；一个任务关联一个或多个校验规则，校验规则共用一套校验任务参数；

<3>校验服务执行模块：通过后台的校验服务引擎，周期扫描校验任务，对符合时间要求的任务，读取其关联的校验规则，解析并执行数据查询脚本和逻辑运算，保存校验结果；同时通过消息机制，将校验结果发布至数据管理人员；

<4>校验结果统计模块：查询数据集的校验结果，统计数据集的合理性、一致性、完整性和及时性指标，对其进行排序分析和历史趋势分析，发现重点关注的数据；

<5>问题处理跟踪模块：对于没有通过校验的规则，管控系统自动生成问题处理事件，要求维护人员在解决问题后，录入事件的解决措施和解决时间，并申请再次进行数据校验；重新校验由质量管控专责通过人工触发完成；如果通过，则记录事件确认标记，通过跟踪环节，监控异常数据处理情况。