如何在Slurm配置文件中正确设置SLURMCTLD_OPTIONS?

时间: 2024-10-25 07:08:44 浏览: 45

slurm在ubuntu上的搭建

### Slurm 在 Ubuntu 上的搭建详解 #### 一、前言 SLURM (Simple Linux Utility for Resource Management) 是一种广泛应用于高性能计算集群中的作业调度系统。本文将详细介绍如何在 Ubuntu 系统上搭建 SLURM 集群，包括准备阶段、munge 安装与配置、SLURM 的安装及配置等关键步骤。 #### 二、准备工作 **1. 配置 `/etc/hosts` 文件** - **目标**: 确保所有节点能够通过主机名相互识别。 - **命令**: `vim /etc/hosts` - **示例格式**: `192.18.26.168 node1` - **验证**: 使用 `ping node1` 测试连通性。 **2. SSH 服务安装与配置** - **安装**: `sudo apt install ssh` - **管理员身份**: `sudo su` - **配置 `/etc/ssh/sshd_config`**: - 将 `PermitRootLogin` 设置为 `yes`。 - 将 `PasswordAuthentication` 设置为 `yes`。 - **更新系统**: `sudo apt update` 或 `sudo apt upgrade`。 #### 三、安装 Munge **1. 安装 Munge** - **命令**: `sudo apt install munge` **2. 创建 Munge 密钥** - **命令**: `create-munge-key` - **注意**: 此命令应在控制节点上执行。 **3. 复制密钥至计算节点** - **命令**: `scp /etc/munge/munge.key root@node1:/etc/munge/` **4. 修改权限** - **命令**: `chmod 400 /etc/munge/munge.key` **5. 启动 Munge 服务** - **命令**: `sudo systemctl restart munge.service` - **命令**: `sudo systemctl enable munge.service` **6. 检查状态** - **命令**: `sudo systemctl status munge.service` **7. 测试 Munge** - **命令**: `munge -n | unmunge` - **命令**: `munge -n | ssh node1` - **命令**: `id munge` 查看 UID 和 GID 是否一致。 **8. 解决潜在问题** - 如遇错误，可尝试卸载后重新安装。 - 卸载: `sudo apt remove munge` - 清理依赖: `sudo apt autoremove` - 删除用户: `sudo userdel -r munge` #### 四、安装 SLURM **1. 安装 SLURM** - **命令**: `sudo apt install slurm-wlm slurm-wlm-doc -y` **2. 测试 SLURM** - **命令**: `slurmd -C` - **命令**: `slurmc -V` **3. 配置 `slurm.conf`** - **编辑文件**: `vim /etc/slurm-llnl/slurm.conf` **示例配置**: ```bash # slurm.conf file generated by configurator-easy.html. # Put this file on all nodes of your cluster. # See the slurm.conf man page for more information. ControlMachine=node1 MpiDefault=none ProctrackType=proctrack/pgid ReturnToService=1 SlurmctldPidFile=/var/run/slurm-llnl/slurmctld.pid SlurmdPidFile=/var/run/slurm-llnl/slurmd.pid SlurmdSpoolDir=/var/spool/slurm-llnl SlurmUser=root StateSaveLocation=/var/spool/slurm-llnl SwitchType=switch/none TaskPlugin=task/none SlurmctldTimeout=3600 SlurmdTimeout=300 BatchStartTimeout=3600 PropagateResourceLimits=NONE FastSchedule=1 SchedulerType=sched/backfill SelectType=select/linear ClusterName=cluster ``` **4. 启动 SLURM 服务** - **命令**: `sudo systemctl start slurmd.service` - **命令**: `sudo systemctl enable slurmd.service` - **命令**: `sudo systemctl start slurmctld.service` - **命令**: `sudo systemctl enable slurmctld.service` **5. 验证 SLURM 状态** - **命令**: `sinfo` - 应该可以看到节点的状态信息。 #### 结语通过以上步骤，您应该能够在 Ubuntu 系统上成功搭建并配置 SLURM 集群。SLURM 的安装和配置过程可能会遇到各种问题，但通过仔细阅读文档和参考本文提供的步骤，大多数问题都可以得到解决。此外，根据实际情况调整配置文件是确保 SLURM 能够高效运行的关键。

在Slurm配置文件（通常是/etc/slurm-llnl.conf 或者 site-specific configuration files如/slurm.conf）中设置`SLURMCTLD_OPTIONS`，你需要添加一条包含该变量及其值的行。这通常是通过`control_slurmctld`部分来完成的，这是一个块，用于指定控制守护进程（slurmd）的各种选项。示例： ```bash # 在 Slurm 配置文件中设置 SLURMCTLD_OPTIONS control_slurmctld = "nice -n 19 /usr/sbin/slurmd %SLURMCTLD_OPTIONS%" ``` 在这个例子中，`nice -n 19`是为了调整slurmd的优先级，`/usr/sbin/slurmd`是slurm守护进程的实际路径，`%SLURMCTLD_OPTIONS%`是表示实际的选项将被替换到这里。在修改配置后，记得重启Slurm服务（`scontrol reconfigure && srun --nodes=1 qalter -u`）以应用更改。务必谨慎处理，因为不当的设置可能会干扰系统的正常运行。

阅读全文

如何在Slurm配置文件中正确设置SLURMCTLD_OPTIONS?

相关推荐

slurm安装的muge包和配置文件

pcp-pmda-slurm-4.3.2-13.el7_9.x86_64.rpm

slurmctld.service: Referenced but unset environment variable evaluates to an empty string: SLURMCTLD_OPTIONS

lurmctld.service: Referenced but unset environment variable evaluates to an empty string: SLURMCTLD_OPTIONS

Install_guide_CentOS7_Warewulf_SLURM_1.3.4_x86_64.pdf

hadoop、slurm配置安装手册

slurm-env-config:slurm-env-config从环境变量写入slurm conf文件

slurm_design

logCabin：将SLURM外文件目录中的概要文件数据编译为R数据帧

slurm_queue_stats：一些脚本，用于在slurm管理的群集上使用当前的nodecoregpu

slurm-env-config: 从环境变量自动生成Slurm配置文件工具介绍

Slurm系统中Muge包与配置文件的安装教程

在slurm 中, 使用scontrol 创建的分区write slurm.conf 文件, 但是重新加载 configure 文件后又丢失 ?

slurm gpu 配置

在slurm中, 如何检查GANG调度配置正确,并且提供一个在单个分区执行GANG调度的脚本

在slurm 中, 当PreemptType=preempt/qos 时, 如何配置在同一个QOS中不同的job之间抢占? 如何在不同QOS之间进行不同的job 抢占? 请列举实例.

在slurm 中,分区配置中的 AllowQOS , QOS 的区别是什么

slurm如何配置队列

slurm mysql_Slurm集群部署

最新推荐

slurm安装心得体会,虚拟机中安装，并提交作业，以及队列用户限制

若依管理存在任何文件读取漏洞检测系统，渗透测试.zip

C语言数组操作：高度检查器编程实践

管理建模和仿真的文件

【KUKA系统变量进阶】：揭秘从理论到实践的5大关键技巧

如何使用Python编程语言创建一个具有动态爱心图案作为背景并添加文字'天天开心（高级版）'的图形界面？

基于Swift开发的嘉定单车LBS iOS应用项目解析

"互动学习：行动中的多样性与论文攻读经历"

PROTEUS符号定制指南：个性化元件创建与修改的全面攻略

https://www.lagou.com/wn/爬取该网页职位名称，薪资待遇，学历，企业类型，工作地点数据保存为CSV文件的python代码