[发明专利]数据仓库模型的治理系统

说明书

本发明涉及一种数据仓库模型的治理系统，包括：规范模型开发模块、模型监控模块和模型指标层级分类模块；规范模型开发模块用于根据预设模型开发规范检测模型指标数据，得出检测结果，并将检测结果发送给预设终端；模型监控模块用于获取模型指标数据质量信息，并根据预设模型指标监控规则的执行数据得到模型指标数据监控结果；预设模型指标监控规则根据模型指标数据质量信息确定出；模型指标层级分类模块用于获取待分类模型指标数据，并对待分类模型指标数据进行模型指标分类，得到模型指标层级分类元数据。本发明提高了数据模型的质量，有利于数据模型的推广，且本发明多为智能处理模型数据，使得本发明具有人力成本低的优点。

技术领域

本发明涉及数据模型处理技术领域，具体涉及一种数据仓库模型的治理系统。

背景技术

随着快递行业的高速发展，业务域不断扩展，数据量成几何级曲线增长，早期为了迅速响应业务、分析、应用等各方需求而采取的“烟囱式”开发方式开发数据仓库的数据模型。目前的数据仓库的数据模型在规范、释义、时效、质量等多个方面都没有系统性的约束。

针对目前数据模型存在的问题，相关技术采用对数据模型进行模型层面的推荐指数打分，以得到数据模型的模型质量数据的技术方案。然而，相关技术的粗粒度的数据难以提高数据模型的质量，促进数据模型的推广，以及需要在具体模型指标上投入巨大的人工沟通成本。

发明内容

有鉴于此，提供一种数据仓库模型的治理系统，以解决相关技术存在的难以提高数据模型的质量和数据模型的推广效果，以及人力成本高的问题。

本发明采用如下技术方案：

一种数据仓库模型的治理系统，包括：规范模型开发模块、模型监控模块和模型指标层级分类模块；

所述规范模型开发模块用于根据预设模型开发规范检测模型指标数据，得出检测结果，并将所述检测结果发送给预设终端；

所述模型监控模块用于获取模型指标数据质量信息，并根据预设模型指标监控规则的执行数据得到模型指标数据监控结果；所述预设模型指标监控规则根据所述模型指标数据质量信息确定出；

所述模型指标层级分类模块用于获取待分类模型指标数据，并对所述待分类模型指标数据进行模型指标分类，得到模型指标层级分类元数据。

优选的，本发明的数据仓库模型的治理系统还包括模型指标评价模块；

所述模型指标评价模块用于根据预设模型指标层次分类标准对所述模型指标层级分类元数据进行层次分类。

优选的，所述层次分类的分类结果包括核心、重要、普通和一般。

优选的，所述模型指标数据包括量值、计算口径、模型指标释义和业务模块。

优选的，所述对所述待分类模型指标数据进行模型指标分类，包括：

基于特征工程对所述待分类模型指标数据进行数据清洗；

基于决策树算法对进行数据清洗后的所述待分类模型指标数据进行模型指标分类。

本发明采用以上技术方案，一种数据仓库模型的治理系统，包括：规范模型开发模块、模型监控模块和模型指标层级分类模块；规范模型开发模块用于根据预设模型开发规范检测模型指标数据，得出检测结果，并将检测结果发送给预设终端；模型监控模块用于获取模型指标数据质量信息，并根据预设模型指标监控规则的执行数据得到模型指标数据监控结果；预设模型指标监控规则根据模型指标数据质量信息确定出；模型指标层级分类模块用于获取待分类模型指标数据，并对待分类模型指标数据进行模型指标分类，得到模型指标层级分类元数据。