Bash：如何在满足指定条件时继续多VM进程启动循环

核心问题是ssh会一直保持会话直到远程命令结束，而myprogram持续运行导致循环卡住。我们需要在远程进程完成初始化（日志出现setup complete）后主动结束ssh会话，让循环继续执行。

推荐方案：修改command.sh实现远程启动+日志检测 #

直接在远程机器上启动后台进程，并实时检测日志，满足条件后退出ssh会话：

#!/bin/bash
vmip=$1
ssh user@"$vmip" -T <<'EOF'
# 启动myprogram到后台，并重定向输出到日志
myprogram -flag &> output.log &
PROG_PID=$!

# 用tail跟踪日志，配合grep检测目标字符串，超时5分钟防止无限等待
timeout 5m tail -f output.log | while read -r line; do
    if echo "$line" | grep -q "setup complete"; then
        exit 0  # 检测到目标后立即退出，结束ssh会话
    fi
done

# 超时后也会自动退出，避免卡住
EOF

关键细节说明 #

• myprogram -flag &> output.log &：把进程放到后台运行（&），确保ssh不会一直等待进程结束；&>同时重定向标准输出和错误到日志文件。
• <<'EOF'：单引号包裹的Here Document，避免本地Shell解析远程命令里的变量，保证远程执行的命令完全符合预期。
• timeout 5m：设置5分钟超时，即使日志没出现目标字符串，也会强制结束检测，避免GitHub Actions任务无限挂起。
• tail -f output.log | while read...：实时跟踪日志输出，一旦匹配到setup complete就退出循环，结束ssh会话，让主循环继续处理下一台VM。

备选方案：本地轮询远程日志 #

如果不想修改远程执行逻辑，也可以在本地启动远程进程后，循环检测远程日志状态：

#!/bin/bash
VMS=("10.10.789.001" "10.10.789.002" "10.10.789.003")
TIMEOUT=300  # 超时时间，单位秒（5分钟）
CHECK_INTERVAL=5  # 检测间隔，单位秒

for VMIP in "${VMS[@]}"; do
    # 用nohup启动远程进程，确保ssh断开后进程仍能运行
    ssh user@"$VMIP" "nohup myprogram -flag &> output.log &"
    
    START_TIME=$(date +%s)
    echo "Waiting for VM $VMIP setup complete..."
    
    while true; do
        # 远程检查日志是否包含目标字符串
        ssh user@"$VMIP" "grep -q 'setup complete' output.log"
        if [ $? -eq 0 ]; then
            echo "VM $VMIP setup done"
            break
        fi
        
        # 检查是否超时
        CURRENT_TIME=$(date +%s)
        ELAPSED=$((CURRENT_TIME - START_TIME))
        if [ $ELAPSED -ge $TIMEOUT ]; then
            echo "VM $VMIP setup timed out after $ELAPSED seconds"
            break
        fi
        
        sleep $CHECK_INTERVAL
    done
done

注意事项 #

• nohup：确保远程进程在ssh会话结束后不会被终止，适合后台长期运行的程序。
• 本地轮询会多次建立ssh连接，频率过高可能触发远程机器的连接限制，所以设置CHECK_INTERVAL控制检测间隔。

为什么之前的timeout方案无效？ #

你之前用timeout 5m command.sh，会直接终止整个command.sh进程（包括ssh会话），但这是强制终止，不是正常等待初始化完成后退出。我们需要的是等待目标条件满足后主动结束会话，而不是强制杀死进程。

内容的提问来源于stack exchange，提问作者Tijmen