如何自动重启Jenkins服务器节点所在的虚拟机或物理主机？

针对你遇到的Jenkins节点断电后批量失联、需要手动恢复的痛点，结合你的环境（2.89.4版本、40多节点覆盖CentOS7/OSX/Windows），我整理了一套安全且可落地的自动重启方案，既能实现故障后的自动恢复，又能避免误操作带来的风险：

一、核心思路：分层恢复+安全触发 #

我们要做的是先尝试重启Jenkins节点服务，确认无法恢复后再触发主机重启，同时通过权限控制、双重校验等机制保障安全，避免误重启正常节点。

二、分系统配置主机重启权限（最小化权限原则） #

1. CentOS 7节点（物理机/虚拟机） #

• 首先给Jenkins节点用户配置仅允许执行重启命令的sudo免密权限，避免赋予过高权限：
  用visudo -f /etc/sudoers.d/jenkins编辑配置文件，添加：

  jenkins ALL=(ALL) NOPASSWD: /usr/bin/systemctl reboot
  

  这一步一定要用visudo编辑，避免语法错误导致sudo失效。
• 后续Jenkins可以通过远程SSH执行sudo systemctl reboot触发重启。

2. Windows节点（7/8/10） #

• 给Jenkins节点服务账户配置本地管理员的最小权限，或者通过组策略限制该账户仅能执行重启命令：
  你可以创建一个专用账户，仅授予“关闭系统”的权限，避免全量管理员权限。
• 开启WinRM服务并配置HTTPS加密连接（禁止明文传输），然后通过PowerShell执行重启命令：

  shutdown /r /f /t 0
  

3. OSX节点 #

• 同样配置sudo免密重启权限，编辑/etc/sudoers（推荐用visudo）添加：

  jenkins ALL=(ALL) NOPASSWD: /sbin/shutdown -r now
  

• Jenkins通过远程SSH执行sudo shutdown -r now即可触发重启。

三、关键安全保障机制 #

为了避免误操作，这些安全措施一定要落实：

• 权限最小化：所有节点的Jenkins用户仅拥有执行重启命令的权限，禁止其他sudo/管理员操作。
• 双重校验触发：先尝试重启Jenkins节点服务（比如CentOS的systemctl restart jenkins-slave、Windows的Restart-Service JenkinsSlave），如果连续3次尝试恢复失败，再触发主机重启。
• 操作日志审计：所有重启操作都要记录到Jenkins日志和节点系统日志中，方便事后排查原因。
• IP白名单限制：在节点防火墙（CentOS的firewalld、Windows防火墙）中添加规则，仅允许Jenkins主服务器的IP地址访问SSH/WinRM端口，避免非法远程操作。
• 测试先行：先在1-2台测试节点上验证整个流程，确认不会误触发后再推广到所有生产节点。

四、Jenkins自动化实现示例（Pipeline脚本） #

你可以创建一个定时运行的Pipeline，自动检查节点状态并执行分层恢复：

pipeline {
    agent any
    triggers {
        cron('*/5 * * * *') // 每5分钟检查一次节点状态
    }
    stages {
        stage('Check & Recover Offline Nodes') {
            steps {
                script {
                    // 获取所有离线节点
                    def offlineNodes = Jenkins.instance.nodes.findAll { 
                        def computer = it.toComputer()
                        computer != null && !computer.isOnline()
                    }
                    
                    offlineNodes.each { node ->
                        echo "⚠️ Node ${node.name} is offline, trying to restart agent service first..."
                        
                        // 根据节点标签选择对应服务重启命令
                        def restartAgentCmd = ''
                        if (node.label.contains('centos')) {
                            restartAgentCmd = 'sudo systemctl restart jenkins-slave'
                        } else if (node.label.contains('windows')) {
                            restartAgentCmd = 'Restart-Service JenkinsSlave'
                        } else if (node.label.contains('osx')) {
                            restartAgentCmd = 'sudo launchctl stop com.jenkins.slave && sudo launchctl start com.jenkins.slave'
                        }
                        
                        // 执行服务重启并检查结果
                        def restartResult = sh(
                            script: restartAgentCmd, 
                            returnStatus: true, 
                            node: node.name
                        )
                        
                        // 如果服务重启失败，触发主机重启
                        if (restartResult != 0) {
                            echo "❌ Failed to restart agent on ${node.name}, triggering host reboot..."
                            def rebootCmd = ''
                            if (node.label.contains('centos')) {
                                rebootCmd = 'sudo systemctl reboot'
                            } else if (node.label.contains('windows')) {
                                rebootCmd = 'shutdown /r /f /t 0'
                            } else if (node.label.contains('osx')) {
                                rebootCmd = 'sudo shutdown -r now'
                            }
                            
                            sh(script: rebootCmd, node: node.name)
                            echo "✅ Reboot command sent to ${node.name}"
                        } else {
                            echo "✅ Agent service restarted successfully on ${node.name}"
                        }
                    }
                }
            }
        }
    }
    post {
        always {
            echo "Node recovery check completed at ${new Date()}"
        }
    }
}

注意：你的Jenkins版本是2.89.4，部分新插件可能不兼容，建议用原生Pipeline和SSH/WinRM功能实现，避免依赖太新的插件。

内容的提问来源于stack exchange，提问作者user3270760