Azure Data Factory子管道并发执行的时序控制问题

方案一：父管道内按索引动态延迟后触发子管道 #

• 保持Foreach的并行设置（并发数6），在Foreach的每个分支里，先添加Delay活动，再调用子管道
• Delay的时间用表达式计算：@mul(loopIndex(), 35)（loopIndex()会返回当前Foreach循环的索引，从0开始）
• 第一个子管道立即启动，第二个延迟35秒，第三个延迟70秒……以此类推，直接拉开各子管道的启动间隔，结束时间也会对应产生差异

方案二：子管道接收索引参数，动态设置随机延迟 #

• 父管道调用子管道时，把当前Foreach的索引（@loopIndex()）作为参数传递给子管道
• 子管道内添加Delay活动，位置可选在核心逻辑开头（控制启动后延迟执行）或结尾（控制结束时间），延迟时间用表达式：@mul(pipeline().parameters.Index, rand(30,41))
  • rand(30,41)会生成30-40秒的随机数，配合索引乘数，确保每个子管道的延迟时间唯一，不会出现同时结束的情况

为什么之前的方法无效？ #

• 子管道加固定Delay：所有子管道同时启动，会同时走到Delay步骤，最终同时结束，无法拉开时间差
• Set Counter：每个子管道实例是独立运行的，计数器不会在实例间共享，每个实例的计数器都是初始值，自然无法实现递增延迟的效果

内容的提问来源于stack exchange，提问作者Nagarajan Lakshmi Narayanan