如何基于file.txt动态生成Jenkins Groovy流水线Stage？

核心思路 #

1. 读取并解析file.txt中的多组配置，转换成可遍历的对象数组
2. 借助Jenkins Pipeline的动态语法，循环遍历配置数组，为每组配置生成独立的Stage
3. 每个独立Stage内部可自由实现拆分、并行等自定义逻辑，摆脱外层并行的限制

完整代码示例 #

// 保留你原有的全局变量声明
def (image_properties, branch) = [ [image_tags:[]], null ]

pipeline {
    agent any
    stages {
        stage('读取配置文件') {
            steps {
                script {
                    // 读取file.txt并解析为配置数组，这里按每行"镜像标签,分支"的格式处理
                    // 可根据你的实际配置格式调整解析逻辑（比如JSON格式用readJSON）
                    def configLines = readFile('file.txt').readLines().findAll { it.trim() != '' }
                    def configs = configLines.collect { line ->
                        def (tag, branchName) = line.split(',').collect { it.trim() }
                        return [image_tag: tag, branch: branchName]
                    }
                    
                    // 更新全局变量（如果后续Stage需要复用）
                    image_properties.image_tags = configs.collect { it.image_tag }
                    branch = configs // 也可根据需求赋值单个分支或分支列表
                }
            }
        }
        
        // 动态生成独立Stage
        script {
            // 复用前面读取的配置数组，也可在此重新读取解析
            def configs = readFile('file.txt').readLines().findAll { it.trim() != '' }.collect { line ->
                def (tag, branchName) = line.split(',').collect { it.trim() }
                return [image_tag: tag, branch: branchName]
            }
            
            configs.each { config ->
                // 生成唯一的Stage名称，避免重复
                stage("镜像构建任务: ${config.image_tag} (分支: ${config.branch})") {
                    steps {
                        script {
                            echo "启动任务：处理镜像 ${config.image_tag}，对应分支 ${config.branch}"
                            
                            // 每个Stage内部可自由实现并行/串行逻辑
                            parallel(
                                '代码拉取': {
                                    echo "拉取分支 ${config.branch} 代码"
                                    // 替换为实际拉取代码的逻辑（如git拉取）
                                },
                                '镜像预构建检查': {
                                    echo "检查镜像 ${config.image_tag} 的构建依赖"
                                    // 替换为实际检查逻辑
                                }
                            )
                            
                            echo "开始构建镜像 ${config.image_tag}"
                            // 替换为实际镜像构建逻辑
                            
                            echo "完成镜像 ${config.image_tag} 的构建与推送"
                        }
                    }
                }
            }
        }
    }
}

关键说明 #

• 配置解析适配：如果file.txt是JSON格式，直接用readJSON file: 'file.txt'读取成数组即可，无需手动拆分字符串
• 独立Stage生成：通过script块包裹循环，遍历配置数组生成独立Stage，每个Stage拥有唯一标识名称，避免冲突
• Stage内部自由度：每个独立Stage内可根据需求实现任意逻辑，包括并行任务、串行步骤，完全满足你的拆分需求
• 全局变量复用：读取配置时可同步更新全局的image_properties和branch变量，供后续Stage调用

注意事项 #

• 确保运行Pipeline的Jenkins节点有权限读取file.txt文件
• 若配置项数量较多，需注意Jenkins的并发执行限制，可根据情况调整节点资源
• Stage名称必须唯一，建议用配置中的唯一标识（如镜像标签、分支名）组合命名

内容的提问来源于stack exchange，提问作者Hare Krshn