[发明专利]一种组件部署方法、系统及计算机可读存储介质有效
申请号: | 202011504336.3 | 申请日: | 2020-12-18 |
公开(公告)号: | CN112671879B | 公开(公告)日: | 2023-01-10 |
发明(设计)人: | 李勇 | 申请(专利权)人: | 北京浪潮数据技术有限公司 |
主分类号: | H04L67/1074 | 分类号: | H04L67/1074;H04L67/00;H04L41/0803;G06F8/60 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 高勇 |
地址: | 100085 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 组件 部署 方法 系统 计算机 可读 存储 介质 | ||
本申请公开了一种组件部署方法,包括:网关接收安装消息后,从Apache下载服务下载组件;网关完成组件下载后,每次获取预设数量个未下载组件的节点的节点IP,并通知所获取的节点IP对应的节点从网关处下载组件,直至不存在未下载组件的节点;节点完成组件下载后,作为提供下载服务的节点,每次获取预设数量个未下载组件的节点的节点IP,并通知所获取的节点IP对应的节点从已下载组件的节点处下载组件,直至不存在未下载组件的节点;其中,从网关处及从节点处下载组件的节点在完成组件下载后均作为提供下载服务的节点。该方法能够有效提高组件部署速度。本申请还公开了一种组件部署系统以及计算机可读存储介质,均具有上述技术效果。
技术领域
本申请涉及服务器技术领域,特别涉及一种组件部署方法;还涉及一种组件部署系统以及计算机可读存储介质。
背景技术
目前,基于Ambari的大数据平台部署组件的方式是集群内各节点的Ambari-agent接收Ambari-server下发的安装消息后,几乎同时向Apache下载服务获取组件。Apache下载服务在短时间内会收到大量的请求而远远超出Apache下载服务的负载能力,由此导致组件部署的时间较长。例如,在集群规模为5000个节点的情况下,各节点部署HDFS组件时,Apache下载服务在短时间内会收到近万个请求,5000个节点完成HDFS组件部署大概需要5个小时左右。
因此,如何提高组件部署速度已成为本领域技术人员亟待解决的技术问题。
发明内容
本申请的目的是提供一种组件部署方法,能够有效提高组件部署速度。本申请的另一个目的是提供一种组件部署系统以及计算机可读存储介质,均具有上述技术效果。
为解决上述技术问题,本申请提供了一种组件部署方法,包括:
网关接收安装消息后,从Apache下载服务下载组件;
所述网关完成组件下载后,每次获取预设数量个未下载组件的节点的节点IP,并通知所获取的所述节点IP对应的节点从所述网关处下载组件,直至不存在未下载组件的节点;
所述节点完成组件下载后,作为提供下载服务的节点,每次获取预设数量个未下载组件的节点的节点IP,并通知所获取的所述节点IP对应的节点从已下载组件的所述节点处下载组件,直至不存在未下载组件的节点;其中,从网关处及从节点处下载组件的节点在完成组件下载后均作为提供下载服务的节点。
可选的,所述网关接收安装消息包括:
所述网关的网关节点服务接收Ambari-server服务插件转发的所述安装消息。
可选的,所述网关从Apache下载服务下载组件包括:
所述网关的网关节点服务从所述Apache下载服务下载组件。
可选的,所述节点下载并安装组件包括:
所述节点的节点下载服务从所述网关处或从已下载组件的节点处下载组件;
所述节点下载服务完成组件下载后,向所述节点的Ambari-agent服务插件发送安装消息,以使所述节点的Ambari-agent安装所述组件。
可选的,所述网关及所述节点获取预设数量个未下载组件的节点的节点IP包括:
所述网关及所述节点获取所在分组内的预设数量个未下载组件的节点的节点IP。
为解决上述技术问题,本申请还提供了一种组件部署系统,包括:
网关,用于接收安装消息后,从Apache下载服务下载组件;在完成组件下载后,每次获取预设数量个未下载组件的节点的节点IP,并通知所获取的所述节点IP对应的节点从所述网关处下载组件,直至不存在未下载组件的节点;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京浪潮数据技术有限公司,未经北京浪潮数据技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011504336.3/2.html,转载请声明来源钻瓜专利网。