[发明专利]一种hadoop平台自动安装部署的方法及装置

权利要求书

1.一种hadoop平台自动安装部署的方法，其特征在于，包括： 

S100：发布hadoop版本软件安装包，定制版本配置文件； 

不同发行版和版本号的所述安装包按照目录层次结构存放在yum安装服务器中，版本号目录层下存放具体的hadoop服务的软件安装包； 

不同发行版和版本号的hadoop版本配置文件按照目录层级结构组成配置列表信息后存放在大数据管理平台上，版本号目录层下存放有包括用于指向yum安装服务器对应hadoop服务的软件安装包源位置的repo安装源文件和hadoop服务目录列表，每个hadoop服务目录下包括服务运行所需的默认配置文件； 

S200：运行大数据管理平台，加载所述配置列表信息； 

S300：在大数据管理平台创建集群，在所述配置列表信息中选择所需的hadoop发行版本及版本号； 

S400：将主机加入集群，自动分发步骤S300中选定的hadoop版本号对应的repo安装源文件至集群的各主机上； 

S500：在选定的hadoop版本号对应的hadoop服务目录列表中选择各主机所需的hadoop服务，并将hadoop服务对应的Master和Slaver节点分配到各主机上； 

S600：在所述服务的默认配置文件的基础上对所选的hadoop服务的必要参数进行配置； 

S700：大数据管理平台根据重新配置后的服务配置文件生成包括安装启动任务信息的相关配置信息，将所述安装启动任务信息发送至各主机； 

各主机根据所述repo安装源文件获取相对应的所述hadoop服务的软件安装包，并根据所述安装启动任务信息自动安装并启动各服务。 

2.根据权利要求1所述的一种hadoop平台自动安装部署的方法，其特征在于，在步骤S100中，所述安装包和所述hadoop版本配置文件的目录层级结构中，一级目录层均为发行版本，二级目录层均为版本号，三级均为hadoop服务； 

所述hadoop版本配置文件的三级目录层下还存放有包括服务核心配置文件模板的所述服务的默认配置文件和服务元数据信息描述文件，所述服务元数据 信息描述文件定义每个hadoop服务下包含的组件，以及组件的Master和Slaver从属关系。 

3.根据权利要求1所述的一种hadoop平台自动安装部署的方法，其特征在于，包括在所述主机上安装并运行客户端软件的步骤； 

所述客户端软件在主机上启动后，自动收集当前主机包括操作系统和硬件信息的主机信息并上报给大数据管理平台，并将所述主机信息在大数据管理平台中注册，注册后的主机信息存储在大数据管理平台的数据库中。 

4.根据权利要求1所述的一种hadoop平台自动安装部署的方法，其特征在于，步骤S400中还包括在主机加入集群前需通过私钥身份认证的步骤。 

5.根据权利要求3所述的一种hadoop平台自动安装部署的方法，其特征在于，步骤S600还包括根据各主机不同的配置要求创建不同的配置组，并将不同配置要求的主机划分入对应配置要求的配置组中； 

步骤S700具体包括： 

S701：大数据管理平台根据重新配置后的服务配置文件生成相关配置信息，所述配置信息包括：服务信息、配置组以及服务配置信息、主机与服务组件信息、安装启动任务信息，并将生成的信息保存至数据库中； 

S702：大数据管理平台根据各主机所需安装的服务的不同，将对应的安装启动任务信息以心跳方式发送至各主机的客户端软件； 

S703：各主机的客户端软件接收所述安装启动任务信息后根据所述安装启动任务信息中的指令执行对应所述hadoop服务的软件安装包的安装和启动，所述hadoop服务的软件安装包的安装和启动包括服务组件的安装、配置文件的生成和服务的启动、停止，同时生成执行日记，并将执行日志以异步心跳应答方式发送给大数据管理平台。