如何实时将Slurm的stdout和stderr文件流传输至本地标准输出与标准错误

方法1：SSH + tail实时追踪 #

直接通过SSH连接服务器，用tail命令实时拉取日志文件内容，并定向到本地对应输出流：

• 同步服务器stdout.txt到本地标准输出：

  ssh 你的服务器地址 "tail -f /日志文件路径/stdout.txt"
  

• 同步服务器stderr.txt到本地标准错误输出：

  ssh 你的服务器地址 "tail -f /日志文件路径/stderr.txt" >&2
  

• 若要同时查看两个流，可使用终端多窗口，或者借助screen/tmux在单个窗口内分屏显示。

方法2：rsync定时同步 + 本地tail #

适合网络稳定性一般的场景，先定时把服务器日志同步到本地，再追踪本地副本：

# 后台定时同步stdout到本地
while true; do rsync -avz 你的服务器地址:/日志文件路径/stdout.txt ./local_stdout.txt; sleep 1; done &
# 实时查看本地stdout副本
tail -f local_stdout.txt

# 同理处理stderr
while true; do rsync -avz 你的服务器地址:/日志文件路径/stderr.txt ./local_stderr.txt; sleep 1; done &
tail -f local_stderr.txt >&2

方法3：sshfs挂载服务器日志目录 #

将服务器存放日志的目录挂载到本地，直接像操作本地文件一样实时追踪：

# 先在本地安装sshfs（不同系统命令不同）
# Ubuntu/Debian: sudo apt install sshfs
# CentOS/RHEL: sudo yum install sshfs

# 挂载服务器日志目录到本地
sshfs 你的服务器地址:/日志文件所在目录 ./本地挂载目录

# 实时追踪日志
tail -f ./本地挂载目录/stdout.txt
tail -f ./本地挂载目录/stderr.txt >&2

关键注意事项 #

• 如果服务器会对日志文件进行轮转（比如日志滚动生成新文件），请用tail -F（大写F）替代tail -f，它会自动追踪新生成的同名文件。
• 若你的作业调度系统（如Slurm）支持自定义输出配置，可直接在提交作业时将stdout/stderr通过SSH转发到本地，比如使用--output=-和--error=-参数，但前提是集群允许此类输出转发。

内容的提问来源于stack exchange，提问作者ysig