[发明专利]一种数据治理驱动数据共享交换系统及其工作方法在审
申请号: | 201810982805.9 | 申请日: | 2018-08-27 |
公开(公告)号: | CN109344133A | 公开(公告)日: | 2019-02-15 |
发明(设计)人: | 金日海;王纯斌;刘俊良;王双 | 申请(专利权)人: | 成都四方伟业软件股份有限公司 |
主分类号: | G06F16/176 | 分类号: | G06F16/176;G06F16/2457;G06F16/25;G06F11/10 |
代理公司: | 成都睿道专利代理事务所(普通合伙) 51217 | 代理人: | 万利 |
地址: | 610000 四川省*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据共享交换 技术元数据 业务元数据 数据治理 元数据 采集 安全数据交换 异构数据源 元数据标准 元数据处理 元数据存储 元数据内容 驱动 错误数据 关系生成 接入信息 企业数据 输出数据 数据订阅 数据接口 统一管理 问题数据 业务需求 影响分析 元数据库 正确数据 质量分析 质量规则 校验 采集器 跨网络 比对 推送 解析 订阅 分析 资产 治理 服务 | ||
本发明公开了一种数据治理驱动数据共享交换方法元数据采集器根据元数据标准采集异构数据源中的元数据,将采集的元数据存储至元数据库,元数据处理模块根据元数据接入信息通过影响分析、血缘分析和全链分析解析业务元数据和技术元数据的关系;数据治理模块通过识别业务元数据和技术元数据的关系生成待治理表的质量规则对元数据内容进行校验比对,得到问题数据、错误数据、正确数据和质量分析报告;数据共享交换模块根据数据订阅方式提供数据接口或推送类服务,输出数据订阅结果。本发明提供了技术元数据和业务元数据的统一管理,充分利用企业数据资产,满足企业对跨网络安全数据交换的业务需求。
技术领域
本发明属于数据资源管理技术领域,具体涉及一种数据治理驱动数据共享交换系统及其工作方法。
背景技术
随着大数据时代的到来,现代化信息网络建设的飞速发展,软件办公,移动互联网早已融入各行各业。伴随着软件产业的进步,各行各业的业务在快速建设的同时,经过长年累月的积累,必然产生大量的业务数据。企业资源信息共享不畅,数据交换系统未确定统一标准,跨系统业务数据未打通,造成大量的数据孤岛。因此为企业提供安全可靠数据共享交换机制,提供规范数据接入、治理、交换和开发迫在眉睫。
如图1所示,现有技术中一般通过数据汇聚工具将元数据上传至数据服务库,然后数据服务库通过数据共享交换模块与数据服务订阅进行交互,而数据共享交换模块中的功能模块一般仅包括数据推送引擎、数据服务引擎、数据服务注册和数据服务管理。
传统的数据交换系统未确定数据交换标准,数据交换系统只关注了数据接入和存储,缺乏对交换过程治理。
发明内容
本发明的目的在于:解决上述现有技术中的不足,提供一种数据治理驱动数据共享交换系统及其工作方法,充分利用企业数据资产,满足企业对跨网络安全数据交换的业务需求。
为了实现上述目的,本发明采用的技术方案为:
一种数据治理驱动数据共享交换系统,包括
元数据采集器,所述的元数据采集器与各源数据模块连接;
元数据库,所述的元数据库分别与所述的元数据处理模块和数据治理模块连接,所述的数据治理模块用于对共享的数据进行质量校验;
数据治理库,所述的数据治理库分别与所述的数据治理模块和数据共享交换模块连接,所述的数据共享交换模块用于提供数据推送和对外接口调用的订阅。
进一步的,上述的元数据库和所述的元数据采集器通过元数据处理模块连接,上述的元数据处理模块用于根据元数据标准自动采集和编目相应元数据并自动匹配元数据的属性、共享方式和标准映射。
进一步的,上述的元数据处理模块和所述的数据治理模块通过元数据标准匹配引擎与所述的元数据库连接。
进一步的,上述的数据治理库通过数据脱敏引擎与所述的数据共享交换模块连接。
一种数据治理驱动数据共享交换方法,应用上述的一种数据治理驱动数据共享交换系统,包括以下步骤:
步骤一:元数据采集器根据元数据标准采集若干异构数据源中的元数据,将采集的元数据存储至元数据库,所述的元数据包括技术元数据和业务元数据;
步骤二:元数据处理模块根据元数据接入信息,形成技术元数据之间的血缘关系、影响关系和分析关系,并通过影响分析、血缘分析和全链分析解析业务元数据和技术元数据的关系;
步骤三:数据治理模块通过识别业务元数据和技术元数据的关系生成待治理表的质量规则,然后根据质量规则对元数据内容进行校验比对,得到问题数据、错误数据、正确数据和质量分析报告并将问题数据、错误数据、正确数据和质量分析报告分类存入数据治理库中;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于成都四方伟业软件股份有限公司,未经成都四方伟业软件股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810982805.9/2.html,转载请声明来源钻瓜专利网。