如何实时重定向后台Bash管道输出并添加前缀信息

我有一个长期运行的Bash脚本（类似守护进程），会向stdout和stderr输出内容，需求如下：

• 为每一行输出添加前缀字符串（如日志条目日期、时间及其他信息）
• 将所有输出重定向至日志文件
• 输出重定向必须实时进行（即进程运行时日志文件持续写入）
• 进程需在后台运行

当前实现代码 #

myscript="script_name"
log_file="/tmp/blabla"

prepend_info() {
    xargs -d '\n' printf "$(date +'%b %d %T') $HOSTNAME $myscript: %s\n"
}

script -q -c "$myscript" /dev/null 2>&1 | prepend_info > "$log_file" 2>&1 &

遇到的问题 #

日志文件仅在脚本终止后才写入，无法实时查看。移除管道| prepend_info后实时写入正常，但丢失前缀信息——核心原因是Bash管道默认启用全缓冲，只有缓冲区填满或上游进程退出时，才会把数据传递给下游命令。

限制条件 #

仅使用简单Bash命令，无法用ts工具，需在后台脚本运行时修改输出并重定向至文件。

已找到的解决方案 #

myscript="script_name"
log_file="/tmp/blabla"

exec_script() {
    rm -f "$log_file"
    local out_log=<($myscript 2>&1)
    while read -r line; do
        echo "$(date +'%b %d %T') $HOSTNAME $myscript: $line" >> $log_file
    done < "$out_log"
}

exec_script &

更优兼容方案 #

方案1：关闭管道缓冲+逐行处理

通过stdbuf强制关闭缓冲，配合while read逐行处理，确保实时输出：

myscript="script_name"
log_file="/tmp/blabla"

prepend_info() {
    while IFS= read -r line; do
        printf '%b %d %T %s %s: %s\n' "$(date +'%b')" "$(date +'%d')" "$(date +'%T')" "$HOSTNAME" "$myscript" "$line"
    done
}

# stdbuf强制无缓冲，确保每一行输出实时传递
stdbuf -o0 -e0 "$myscript" 2>&1 | stdbuf -i0 prepend_info > "$log_file" &

• stdbuf -o0 -e0：让目标脚本的stdout/stderr无缓冲输出
• stdbuf -i0：让前缀处理函数的stdin无缓冲读取
• IFS= read -r line：保留行首行尾空格，不解析反斜杠转义字符

方案2：优化read循环的IO性能

针对你找到的read循环方案，优化文件IO操作（避免每次>>重复打开关闭日志文件）：

myscript="script_name"
log_file="/tmp/blabla"

exec_script() {
    rm -f "$log_file"
    # 绑定文件描述符，一次性打开日志文件
    exec 3>"$log_file"
    "$myscript" 2>&1 | while IFS= read -r line; do
        printf '%b %d %T %s %s: %s\n' "$(date +'%b')" "$(date +'%d')" "$(date +'%T')" "$HOSTNAME" "$myscript" "$line" >&3
    done
    exec 3>&- # 关闭文件描述符
}

exec_script &

• 用文件描述符3绑定日志文件，循环内直接写入>&3，减少IO开销
• 同样保证逐行实时处理，避免缓冲问题

方案3：保留script命令的实时输出

如果需要用script模拟终端环境，给script添加缓冲控制即可：

myscript="script_name"
log_file="/tmp/blabla"

prepend_info() {
    while IFS= read -r line; do
        printf '%b %d %T %s %s: %s\n' "$(date +'%b')" "$(date +'%d')" "$(date +'%T')" "$HOSTNAME" "$myscript" "$line"
    done
}

stdbuf -o0 script -q -c "$myscript" /dev/null 2>&1 | stdbuf -i0 prepend_info > "$log_file" &

内容的提问来源于stack exchange，提问作者gentooise