[发明专利]一种通过Ranger实现大数据资源隔离的系统及方法

权利要求书

1.一种通过Ranger实现大数据资源隔离的系统，其特征在于：包括Ranger Admin组件、Ranger UserSync组件和Service Plugin组件；RangerAdmin组件对大数据服务策略提供增、删、改、查操作；RangerUserSync组件定期从LDAP、Linux中加载用户，并同步给RangerAdmin组件；Service Plugin组件以插件形式集成到RangerAdmin组件和RangerUserSync组件中，定期从RangerAdmin组件拉取策略，根据用户访问执行策略定期将审计日志存储到Solr中。

2.根据权利要求1所述的通过Ranger实现大数据资源隔离的系统，其特征在于：所述RangerAdmin组件提供WebUI界面和Rest接口。

3.一种通过Ranger实现大数据资源隔离的方法，其特征在于：该方法通过权利要求1-2任意一项所述通过Ranger实现大数据资源隔离的系统来实现，包括以下步骤：

S1、权限实现：大数据组件开启Ranger插件，实现用户/用户组、资源、权限和策略的管理；

S2、HDFS组件资源隔离实现：hdfs-site.xml设置扩展接口；

S3、hbase组件资源隔离实现：hbase-site.xml设置扩展接口；

S4、多租户资源隔离。

4.根据权利要求3所述的通过Ranger实现大数据资源隔离的方法，其特征在于：权限实现过程中，Ranger定义了用户-资源-权限间的关系，Ranger基于策略抽象三者间的关系，生成权限模型。

5.根据权利要求4所述的通过Ranger实现大数据资源隔离的方法，其特征在于：HDFS组件资源隔离实现，启动HDFS，由类加载器加载插件代码，同时启动策略获取线程PolicyRefresher从Ranger-admin拉取策略，并在文件和内存各一份，用户访问，HDFSplugin插件记录审计日志Audit，存储到Solr。

6.根据权利要求5所述的通过Ranger实现大数据资源隔离的方法，其特征在于：用户访问时，hadoop fs-put test.txt/file，Hdfs Plugin插件对用户访问请求鉴权，请求处理到达Namenode的checkPermission方法进行权限验证。

7.根据权利要求6所述的通过Ranger实现大数据资源隔离的方法，其特征在于：hbase组件资源隔离实现启动HMaster和RegionServer,由类加载Ranger权限实现类，启动拉取策略线程PolicyRefresher从RangerAdmin拉取策略，存在文件和内容各一份，用户发出create或admin请求，hbase plugin插件记录审计日志Audit，存储到Solr。

8.根据权利要求7所述的通过Ranger实现大数据资源隔离的方法，其特征在于：多租户资源隔离用户同步到Ranger、LDAP、Kerberos、Linux大数据平台用户体系中，缓存用户Kerberos票据即可使用HDFS shell、hbase shell、Hive jdbc获取用户有权限的资源数据。