[发明专利]基于celery分布式调度框架的jenkins集群管理方法和系统

说明书

本发明公开了一种基于celery分布式调度框架的jenkins集群管理方法，包括：接收若干个执行jenkins的请求并且进行解析，如果解析通过，将请求导入celery分布式调度框架，调取jenkins集群相关运行态数据，根据预设的决策策略对运行态数据经过至少一个判断规则进行决策，根据决策结果对jenkins集群进行修复处理后，将若干个执行jenkins的请求分发到相应的jenkins集群来执行。本发明能够将请求分发和集群管理剥离出来，将工具的使用范围框定在无状态的情况，使其更适宜集成于DevOps流水线中。

技术领域

本发明涉及jenkins集群管理技术领域，具体而言涉及一种基于celery分布式调度框架的jenkins集群管理方法和系统。

背景技术

现有jenkins具备原生的master-slave集群，由于学习成本的因素，当请求过大或原生集群发生故障时，持续服务能力会受到影响，且jenkins版本更新迭代较快，针对现有版本jenkins的二次开发成本颇高。因此亟需一种方法，可以将请求分发和集群管理剥离出来，使其更适宜集成于DevOps流水线中。

发明内容

本发明针对现有技术中的不足，提供一种基于celery分布式调度框架的jenkins集群管理方法和系统，能够将请求分发和集群管理剥离出来，将工具的使用范围框定在无状态的情况，使其更适宜集成于DevOps流水线中。

为实现上述目的，本发明采用以下技术方案：

一种基于celery分布式调度框架的jenkins集群管理方法，所述管理方法包括：

接收若干个执行jenkins的请求并且进行解析，如果解析通过，将请求导入celery分布式调度框架，调取jenkins集群相关运行态数据，根据预设的决策策略对运行态数据经过至少一个判断规则进行决策，根据决策结果对jenkins集群进行修复处理后，将若干个执行jenkins的请求分发到相应的jenkins集群来执行；

其中，在运行态数据的决策过程中，1)如果所有判断规则全部通过，则将执行jenkins的请求采用常规下发策略进行下发，直至返回执行结果；2)如果任意一个判断规则不通过，则根据jenkins集群运行态数据的决策指令来判断jenkins集群是否过载或不可达，并根据判断结果自动修复jenkins集群，待jenkins集群修复成功后重新进行运行态数据决策，直至决策成功；

所述判断规则包括：1)判断jenkins集群所有节点是否均健康；2)判断任务处理的job数量和build数量是否和jenkins集群节点的数量的比例是否在允许比例区间之内。

为优化上述技术方案，采取的具体措施还包括：

进一步地，所述管理方法包括以下步骤：

S1：接收若干个执行jenkins的请求，对其执行解析，如果解析通过，进入S2，否则，抛出异常；

S2：将解析通过的请求导入celery分布式调度框架，使请求通过任务生产者进入任务队列，采用任务调度器读取配置文件内容，周期性地将请求发送至任务队列，由任务代理接收任务处理信息对请求进行调度，将请求分发给消费者，消费者负责接收任务处理请求完成处理并反馈结果；

S3，经过调度，将经过解析的请求分发至jenkins集群，如果调度成功，进入S4，如果调度失败，则抛出异常；

S4：接收jenkins集群返回的运行态数据，根据预设的决策策略对运行态数据经过至少一个判断规则进行决策，如决策成功，则进入S5，如决策失败则进入S6；