[发明专利]kerberos认证集群访问方法、SparkStandalone集群及其驱动节点

说明书

本发明提供了一种kerberos认证集群访问方法、SparkStandalone集群及其驱动节点，当驱动节点接收到第一用户通过客户端提交的Spark任务后，从所述kerberos认证集群获取所述第一用户的身份信息与密钥表文件；利用所述第一用户的身份信息与密钥表文件，登陆kerberos认证服务器；当登陆kerberos认证服务器成功后，从所述kerberos认证集群获取授权令牌；将所述授权令牌发送至执行节点，所述授权令牌用于所述执行节点访问所述kerberos认证集群中的计算资源。本发明的kerberos认证集群访问方法、SparkStandalone集群及其驱动节点，从kerberos认证集群中获取第一用户的身份信息与密钥表文件，以此获取kerberos认证集群的授权令牌，并将授权令牌发送给执行节点，从而实现了SparkStandalone集群中的执行节点对kerberos认证集群的计算资源的访问。

技术领域

本发明涉及通信技术领域，更具体的说，涉及kerberos认证集群访问方法、SparkStandalone集群及其驱动节点。

背景技术

Spark是UC Berkeley AMP lab(加州大学伯克利分校的AMP实验室)所开源的通用并行框架，内部实现了容错性和资源管理，Spark的Standalone模式可以部署到单独的集群中，无需依赖其他资源管理系统，相对于其他的部署方式在性能上有一定的优势。

在实际应用中，SparkStandalone集群需要用到的计算资源可能会存放在某些认证集群中，例如Kerberos认证集群。然而，由于Kerberos认证的限制，SparkStandalone集群并不能直接对Kerberos认证集群中的计算资源进行访问，而且，目前也并没有可行的技术方案能够实现SparkStandalone集群对Kerberos认证集群中的计算资源的访问。

所以，目前迫切需要一种能够实现SparkStandalone集群对Kerberos认证集群中的计算资源进行访问的技术方案。

发明内容

有鉴于此，本发明提供了一种kerberos认证集群访问方法、SparkStandalone集群及其驱动节点，以解决目前SparkStandalone集群无法访问kerberos认证集群中计算资源的问题。

为实现上述目的，本发明提供如下技术方案：

一种kerberos认证集群访问方法，应用于SparkStandalone集群中的驱动节点，所述方法包括：

当接收到第一用户通过客户端提交的Spark任务后，从所述kerberos认证集群获取所述第一用户的身份信息与密钥表文件，其中，所述第一用户为一kerberos认证用户；

利用所述第一用户的身份信息与密钥表文件，登陆kerberos认证服务器；

当登陆kerberos认证服务器成功后，从所述kerberos认证集群获取授权令牌；

当获取到所述授权令牌后，将所述授权令牌发送至执行节点，所述授权令牌用于所述执行节点访问所述kerberos认证集群中的计算资源。

优选的，所述SparkStandalone集群由第二用户启动，所述第二用户是与所述第一用户不同的另一kerberos认证用户。

优选的，所述kerberos认证集群中的第一用户的身份信息与密钥表文件，是由所述客户端在提交所述Spark任务时发送至所述kerberos认证集群的。

优选的，所述密钥表文件与所述第一用户的身份信息相匹配。

优选的，在所述从所述kerberos认证集群获取所述第一用户的身份信息与密钥表文件之后，以及，所述利用所述第一用户的身份信息与密钥表文件，登陆kerberos认证服务器之前，所述方法还包括：