如何等待while循环启动的所有后台作业均完成指定步骤？

你的问题核心是并发更新计数器时的竞态条件——多个后台进程同时读写同一个计数器，导致更新丢失，所以之前的两种方法都失效了。下面给你两种可靠的解决方案：

方法1：用文件锁（flock）保证计数器原子更新 #

通过flock给计数器文件加排他锁，确保同一时间只有一个进程能修改计数器，彻底避免竞态条件：

END=10
# 初始化计数器文件，起始值设为0
echo 0 > /dev/shm/foo

i=0
while [ $i -lt $END ]
do
  (
    SOME COMMAND
    sleep 3
    SOME COMMAND 1
    # 用flock锁定计数器文件，原子更新计数
    (
      # 排他锁绑定到文件描述符200，锁文件用单独的lock文件避免冲突
      flock -x 200
      current_cnt=$(< /dev/shm/foo)
      echo $((current_cnt + 1)) > /dev/shm/foo
    ) 200>/dev/shm/foo.lock
    SOME COMMAND 2
    SOME COMMAND 3
  ) &
  # 用bash原生算术替代expr，更高效
  i=$((i + 1))
done

# 等待计数器达到END
until [ $(< /dev/shm/foo) -ge $END ]
do
  echo "Waiting for all streams to finish SOME COMMAND 1... Current count: $(< /dev/shm/foo)"
  sleep 0.5
done

# 清理临时文件（可选，根据需求保留）
rm -f /dev/shm/foo /dev/shm/foo.lock

方法2：用标记文件（更直观易维护） #

不需要计数器，每个进程完成SOME COMMAND 1后创建一个唯一的标记文件，等待标记文件数量达到目标即可：

END=10
# 创建唯一临时目录存放标记文件，避免和其他进程冲突
MARKER_DIR=$(mktemp -d)

i=0
while [ $i -lt $END ]
do
  (
    SOME COMMAND
    sleep 3
    SOME COMMAND 1
    # 创建以循环变量命名的唯一标记文件
    touch "$MARKER_DIR/marker_$i"
    SOME COMMAND 2
    SOME COMMAND 3
    # 可选：如果后续不需要标记，完成所有步骤后删除
    # rm "$MARKER_DIR/marker_$i"
  ) &
  i=$((i + 1))
done

# 等待标记文件数量达到END
until [ $(ls -1 "$MARKER_DIR" | wc -l) -ge $END ]
do
  current_count=$(ls -1 "$MARKER_DIR" | wc -l)
  echo "Waiting for all streams to finish SOME COMMAND 1... Current count: $current_count"
  sleep 0.5
done

# 清理临时目录
rm -rf "$MARKER_DIR"

为什么之前的方法失效？ #

你之前用共享文件计数时，多个进程会同时读取计数器值，各自加1后再写回去。比如两个进程同时读到foo=5，都计算出6并写入，最终计数器只加了1，而不是2——这种竞态条件会导致计数器永远无法达到END=10，所以循环会一直等待。

两种方案里，标记文件的方法逻辑更简单，不容易出错；文件锁的方法适合需要精确计数的场景，你可以根据自己的需求选择。

内容的提问来源于stack exchange，提问作者IsaIkari