Docker容器中后台进程与管道后台运行差异及输出失效问题排查

这个问题本质是输出缓冲机制和Docker日志收集逻辑共同作用的结果：

1. Docker容器默认只收集PID 1进程（也就是你的boot.sh）的stdout/stderr。两个tail都是后台进程，它们的输出默认继承自父进程boot.sh，理论上都该被捕获，但第二条命令因为经过管道触发了缓冲问题。
2. 当程序的stdout不是直接连接终端时（比如通过管道传递、输出到文件或Docker日志收集器），sed这类Unix工具会启用块缓冲——攒够4KB/8KB左右的数据才会一次性输出。而直接输出的tail没有经过管道，保持了行缓冲模式，内容会实时输出到容器日志。

这就是为什么带prefix:的输出完全看不到：sed一直在缓冲数据，而容器持续运行sleep inf，缓冲永远不会被触发输出。

解决核心是强制sed使用行缓冲，用stdbuf命令修改它的缓冲行为即可：

修改boot.sh中的第二条命令：

tail --follow "/var/log/my-log" | stdbuf -oL sed -e 's/^/prefix:/' &

-oL参数明确指定让sed的stdout采用行缓冲，这样每收到一行日志就会立即输出，Docker就能实时捕获到带前缀的内容了。

如果不想依赖物理日志文件，可以用**命名管道（FIFO）**实现进程间通信，完全避免磁盘存储：

修改后的boot.sh：

#!/bin/sh
echo "starting"

# 创建命名管道（FIFO）
mkfifo /var/log/my-log-fifo

# 启动两个后台进程监听FIFO
tail --follow /var/log/my-log-fifo &
tail --follow /var/log/my-log-fifo | stdbuf -oL sed -e 's/^/prefix:/' &

# 写入初始日志
echo "start" > /var/log/my-log-fifo

echo "sleeping"
sleep inf

使用方式和之前一致：构建镜像运行容器后，在另一个终端用docker exec进入容器，执行date >> /var/log/my-log-fifo，就能在容器日志里同时看到原始日志和带前缀的日志了。FIFO的所有数据都在进程间直接传递，不会占用磁盘空间。

你可以在容器内的bash终端直接运行tail --follow "/var/log/my-log" | sed -e 's/^/prefix:/'，此时sed的stdout是终端，会自动用行缓冲，能实时看到输出；但在boot.sh后台运行时，父进程的stdout是Docker日志收集器（非终端），所以触发块缓冲——这也能直观验证缓冲机制的差异。

内容的提问来源于stack exchange，提问作者Ulrich Eckhardt