Gilbreth集群G子节点（Nvidia A100）性能不一致问题求助

环境与问题说明 #

• 运行环境：Gilbreth集群的G子集群，采用Nvidia A100 GPU，包含12个节点（G[000-011]），每个节点配备128核
• 异常现象：在G[005]、G[006]节点运行MATLAB代码仅需2小时即可完成；在其余节点（G[000-004、007-011]）运行时，计算速度极慢，耗时超过4小时
• 现状：所有节点硬件配置理论上完全一致，已咨询学校技术支持但尚未得到解决方案，特此求助

SLURM作业提交脚本 #

#!/bin/sh -l
#SBATCH -A standby
#SBATCH -N 1
#SBATCH -G 1
#SBATCH -n 12
#SBATCH -t 4:00:00
#SBATCH --constraint="C|G|I|J"
#SBATCH --output=slurm-%j-%N.out
/usr/bin/sacct -j "$SLURM_JOBID" --batch-script
/usr/bin/sacct -j "$SLURM_JOBID" --format=NodeList,JobID
echo "------------------------"
cd ..
module load matlab/R2022a
matlab -batch "myfuncion(0,0,0)"

内容的提问来源于stack exchange，提问作者Ogiad