[发明专利]一种基于slurm作业调度的方法及装置

说明书

本发明公开了一种基于slurm作业调度的方法及装置，包括：第一步，作业调度装置中管理员设置普通用户的等级；第二步，管理员可设置分区等级(如一级、二级等，数字越大等级越高)；第三步，普通用户使用分区资源进行创建作业；第四步，普通用户选择分区，作业调度装置判断用户等级；第五步，若普通用户的等级大于等于分区等级时，可以调用分区资源，使用该分区的资源创建作业。通过上述方式，本发明能够智能、高效地实现资源调度与利用，极大程度利用了服务器资源，对服务器资源进行高效的利用。

技术领域

本发明涉及系统设计领域，特别是涉及一种基于slurm作业调度的方法及装置。

背景技术

SLURM是一种可用于大型计算节点集群的高度可伸缩和容错的集群管理器和作业调度系统，面向Linux和Unix类似内核的免费和开源工作调度程序，由世界上许多超级计算机和计算机集群使用。它提供了三个关键功能。首先，它在一段时间内为用户分配对资源(计算机节点)的独占和/或非独占访问权限，以便他们可以执行工作。其次，它提供了一个框架，用于在一组分配的节点上启动，执行和监视工作(通常是并行作业，例如MPI)。最后，它通过管理待处理作业队列来仲裁资源争用。SLURM维护着一个待处理工作的队列并管理此工作的整体资源利用。它还以一种排他或非排他的方式管理可用的计算节点(取决于资源的需求)。最后，SLURM将作业分发给一组已分配的节点来执行工作并监视平行作业至其完成。

现有slurm作业调度系统可以实现将一组节点组成分区。分区也可以配置各种约束条件，比如哪个用户可以使用它，分区支持的时限的作业大小。用户可在队列上提交作业，slurm会为任务队列合理地分配资源，并监视作业至其完成，维护着一个待处理工作的队列并管理此工作的整体资源利用。

对于多用户同时提交作业时，仅依靠slurm调度系统现有机制，不能智能、高效地实现资源调度与利用，极大程度浪费服务器资源，无法对服务器资源进行高效的利用。

发明内容

本发明主要解决的技术问题是提供一种基于slurm作业调度的方法及装置，能够解决多用户同时提交作业的情况下，slurm调度系统调度资源不合理，作业完成效率差以及slurm无法自动根据节点资源性能分配分区的问题和slurm无法监控性能且进行调节的问题。

为解决上述技术问题，本发明采用的一个技术方案是：提供一种基于slurm作业调度的方法，包括：第一步，作业调度装置中管理员设置普通用户的等级；第二步，管理员设置分区等级；第三步，普通用户使用分区资源进行创建作业；第四步，普通用户选择分区，作业调度装置判断用户等级；第五步，若普通用户的等级不小于分区等级，则调用所述分区资源，使用所述分区的资源创建作业。

进一步，所述第二步中，管理员可设置分区等级时，管理员根据节点的资源特性设置分区，并且所述作业调度装置监控分区性能，当出现性能过差时，所述作业调度装置报警并且自动调节。

进一步，所述第三步中，普通用户使用分区资源进行创建作业时，普通用户可以手动选择分区，也可以自动选择分区。

进一步，所述自动选择分区为自动选择分区时，作业调度装置自动根据用户等级调度性能中分数高的分区进行分配分区的自动化作业。

一种基于slurm作业调度的装置，包括：登录模块、获取节点信息模块、权限模块、监控性能模块、温度控制模块和创建作业模块；所述登录模块连接到所述获取节点信息模块；所述获取节点信息模块将登录模块中信息传递给所述权限模块；所述权限模块判断权限，判断通过后，所述监控性能模块进行工作，工作完成后；所述创建作业模块执行普通用户创建作业任务。

进一步，所述登录模块包括管理员登录模块和普通用户登录模块。

进一步，所述获取节点信息模块获取节点的信息，管理员根据节点的资源特性设置分区。