[发明专利]一种基于Hadoop的数据治理系统在审
| 申请号： | 201910186592.3 | 申请日： | 2019-03-12 |
| 公开（公告）号： | CN109947820A | 公开（公告）日： | 2019-06-28 |
| 发明（设计）人： | 林贵绪 | 申请（专利权）人： | 山东浪潮云信息技术有限公司 |
| 主分类号： | G06F16/2458 | 分类号： | G06F16/2458;G06F16/335 |
| 代理公司： | 济南信达专利事务所有限公司 37100 | 代理人： | 姜明 |
| 地址： | 250100 山东省济南市高*** | 国省代码： | 山东;37 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种基于Hadoop的数据治理系统，属于数据治理技术领域。本发明的基于Hadoop的数据治理系统包括数据源、数据治理规则配置模块、数据治理规则执行模块、数据交付模块、数据治理评估报告模块、日志模块和权限管理模块。数据源通过查询过滤条件，配置数据挖掘所需的数据；数据治理规则配置模块选择数据源中的数据进入数据挖掘计算；数据治理规则执行模块针对数据处理规则，对输入数据进行治理；数据交付模块使经过治理的数据与数据挖掘模型的输入类型匹配。该发明的基于Hadoop的数据治理系统能够解决数据挖掘、数据计算、数据分析过程中遇到的数据缺少、数据冗余、数据错误等异常情况，具有很好的推广应用价值。 | ||
| 搜索关键词： | 数据治理 规则配置 规则执行 数据挖掘 数据源 交付 查询过滤条件 模块选择数据 权限管理模块 数据处理规则 数据分析过程 数据挖掘模型 配置数据 评估报告 日志模块 输入类型 数据计算 数据冗余 匹配 治理 挖掘 | ||
【主权项】：
1.一种基于Hadoop的数据治理系统，其特征在于：该系统包括数据源、数据治理规则配置模块、数据治理规则执行模块、数据交付模块、数据治理评估报告模块、日志模块和权限管理模块，数据源通过查询过滤条件，配置数据挖掘所需的数据；数据治理规则配置模块选择数据源中的数据进入数据挖掘计算；数据治理规则执行模块针对数据处理规则，对输入数据进行治理；数据交付模块使经过治理的数据与数据挖掘模型的输入类型匹配；数据治理评估报告模块给出应用数据治理规则后，与原始数据的差异性；日志模块用于记录数据挖掘过程产生的日志数据；权限管理模块用于控制用户的权限。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于山东浪潮云信息技术有限公司，未经山东浪潮云信息技术有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910186592.3/，转载请声明来源钻瓜专利网。
