如何通过R控制sbatch任务的执行？

问题背景 #

终端直接执行sbatch baby.bash可正常提交Slurm任务，但通过R的system()或system2()函数调用时（例如system2('sbatch', 'baby.bash')），出现以下错误：

sbatch: error: Invalid user for SlurmUser slurm, ignored
sbatch: fatal: Unable to process configuration file

需求是将sbatch调用嵌入R循环，实现远程并行任务的批量处理。

解决方案 #

• 传递完整环境变量
  终端能正常运行是因为加载了Slurm所需的全部环境变量，而R的系统调用默认可能未继承完整环境。可先在R中加载终端的环境配置，再调用sbatch：

# 加载bash环境配置
system("source ~/.bashrc")
# 提交任务
system2("sbatch", args = "baby.bash")

或者直接传递当前系统环境变量：

system2("sbatch", args = "baby.bash", env = Sys.getenv())

• 使用sbatch完整路径
  R的PATH环境变量可能与终端不一致，导致找不到正确的sbatch程序。先在终端执行which sbatch获取完整路径（如/usr/bin/sbatch），然后在R中用绝对路径调用：

system2("/usr/bin/sbatch", args = "baby.bash")

• 检查R运行环境
  若在IDE（如RStudio）中运行，IDE的启动环境可能与终端不同。尝试直接在终端启动R，再执行调用代码，若能正常运行则需配置IDE的环境变量，添加Slurm相关路径与配置。

• 验证配置文件权限
  确保R运行用户对Slurm配置文件（通常位于/etc/slurm/目录）拥有读取权限。终端能运行说明终端用户有权限，需确认R运行用户的权限与终端用户一致。

内容的提问来源于stack exchange，提问作者Agustin Chasco