[发明专利]一种通过Ranger实现大数据资源隔离的系统及方法

说明书

本发明公开了一种通过Ranger实现大数据资源隔离的系统及方法，属于大数据存储技术领域。本发明的通过Ranger实现大数据资源隔离的系统包括RangerAdmin组件、RangerUserSync组件和ServicePlugin组件；RangerAdmin组件对大数据服务策略提供增、删、改、查操作；RangerUserSync组件定期从LDAP、Linux中加载用户，并同步给RangerAdmin组件。该发明的通过Ranger实现大数据资源隔离的系统能够有效降低基础设施成本，实现租户资源隔离程度高，提高业务和客户数据安全性，具有很好的推广应用价值。

技术领域

本发明涉及大数据存储技术领域，具体提供一种通过Ranger实现大数据资源隔离的系统及方法。

背景技术

多租户是指一个建立在共同底层资源上的环境被多个租户共同使用。如多租户共享大楼基础设施电梯等。通过共享硬件或软件来实现云的规模性成本和安全性，利用多租户技术在多个租户和应用直接安全性地共享IT资源是在安全和成本之间的一种妥协；底层资源共享程度越高，运行成本越低、资源利用率越高；多租户是同一个应用上不同用户隔离，典型的SaaS模型。隔离级别越低会带来更高的高安全风险。

云平台提供多租户隔离，需企业研究应用系统特征，包括应用系统的功能和重要程度、安全性要求等。数据安全方面，某些类型租户(如银行、政府单位等)对数据安全非常关注，这类用户会选择搭建私有云环境。对于一般用户，选择共享程度高云环境，会带来更好经济性,如公有云。

发明内容

本发明的技术任务是针对上述存在的问题，提供一种能够有效降低基础设施成本，实现租户资源隔离程度高，提高业务和客户数据安全性、且支持Kerberos集成和多租户规模横向扩展的通过Ranger实现大数据资源隔离的系统。

本发明进一步的技术任务是提供一种通过Ranger实现大数据资源隔离的方法。

为实现上述目的，本发明提供了如下技术方案：

一种通过Ranger实现大数据资源隔离的系统，包括Ranger Admin组件、RangerUserSync组件和Service Plugin组件；Ranger Admin组件对大数据服务策略提供增、删、改、查操作；Ranger UserSync组件定期从LDAP、Linux中加载用户，并同步给Ranger Admin组件；Service Plugin组件以插件形式集成到Ranger Admin组件和Ranger UserSync组件中，定期从Ranger Admin组件拉取策略，根据用户访问执行策略定期将审计日志存储到Solr中。

作为优选，所述Ranger Admin组件提供WebUI界面和Rest接口。

一种通过Ranger实现大数据资源隔离的方法，通过本发明所述通过Ranger实现大数据资源隔离的系统来实现，包括以下步骤：

S1、权限实现：大数据组件开启Ranger插件，实现用户/用户组、资源、权限和策略的管理；

S2、HDFS组件资源隔离实现：HDFS-site.xml设置扩展接口；

S3、hbase组件资源隔离实现：hbase-site.xml设置扩展接口；

S4、多租户资源隔离。

作为优选，权限实现过程中，Ranger定义了用户-资源-权限间的关系，Ranger基于策略抽象三者间的关系，生成权限模型。