[发明专利]一种自动化安装分布式大数据平台CDH方法

说明书

本发明公开了一种自动化安装分布式大数据平台CDH方法，具体包括以下步骤：S10：环境准备；具体是指：对各节点服务器的基础环境进行检查，准备好安装资源；S20：脚本配置；根据配置文件要求，对所有节点服务器的基本信息及用户的自定义信息配置完毕；S30：安装部署；根据执行脚本的运行流程配置集群基础环境及大数据运行环境，具体包括基础服务配置、搭建NTP服务、SSH免密钥登陆、java环境、安装CDH管理控制台服务以及验证服务状态；S40：结果检查；登陆CDH管理控制台查看结果。本发明的有益效果是：本发明能够有效地实现CDH管理控制台的自动化安装；本发明能够使大数据集群搭建的过程更具高效性、降低失误率。

技术领域

本发明涉及计算机大数据技术领域，具体的说，是一种自动化安装分布式大数据平台CDH方法。

背景技术

随着信息化时代的迅速发展，大数据的使用越来越广泛，但因安装系统环境的差异，产生了安装分布式大数据平台很多复杂的操作，集群数量越多人工成本越高。

由于分布式大数据平台需要用到可横向扩展的计算机，集群数量从3个到上百，上千都有，数据越多，人工出错的几率就越高，所耗费的人工成本就越高，亟需解决人工操作带来的时间成本与误操作问题。

发明内容

本发明的目的在于提供一种自动化安装分布式大数据平台CDH方法，有效的降低出错的几率，降低人工成本和时间成本。

本发明通过下述技术方案实现：

一种自动化安装分布式大数据平台CDH方法，具体包括以下步骤：

S10：环境准备；具体是指：对各节点服务器的基础环境进行检查，准备好安装资源；

S20：脚本配置；根据配置文件要求，对所有节点服务器的基本信息及用户的自定义信息配置完毕；

S30：安装部署；根据执行脚本的运行流程配置集群基础环境及大数据运行环境，具体包括基础服务配置、搭建NTP服务、SSH免密钥登陆、java环境、安装CDH管理控制台服务以及验证服务状态；

S40：结果检查；登陆CDH管理控制台查看结果。

进一步地，为了更好的实现本发明，所述步骤S10中对各节点服务器的基础环境进行检查，具体包括：

步骤S11：判断各节点服务器的操作系统版本是否符合要求；

若否，则需要重新安装操作系统；

步骤S12：对各节点服务器操作系统的系统架构检查，判断操作系统是否为x86_64的系统架构；

步骤S13：对各节点服务器操作系统的IP网络进行检查，测试各节点之间是否连通；

步骤S14：检查各个节点服务器的配置文件、安装包及执行脚本。

进一步地，为了更好的实现本发明，所述步骤S20具体包括：

步骤S21：检查所有节点服务器的IP地址、SSH端口、root用户密码、用户大数据平台安装的自定义信息配置到部署文件里；

若否，需要针对提示未合理设置的地方修改；

步骤S22：检查所有节点服务器的配置信息是否正确，以及自定义信息配置是否合理；

若否，则需要针对异常和不合理信息做出调整。

进一步地，为了更好的实现本发明，所述步骤S30具体包括单机配置安装和联机配置安装：所述单机配置安装具体包括以下步骤：

步骤S31：所有节点按照脚本配置信息的对应关系，设置各服务器的IP为静态IP，设置完成后重启NETWORK服务；