求GNU/Linux下高效便携的管道字节补零至字边界Shell语句

需求概述 #

需在超大字节流（超出内存/存储承载）末尾补NUL字节，使输出长度可被指定值N整除，用于Shell管道场景：

generate_arbitrary_length | paddingN | work_with_padded

现有N=8192的实现依赖dd：

padding8192(){ dd status=none bs=8192 conv=sync ; }

但N=4时该方法速度骤降数个数量级；而tee+wc+dd的组合虽快，但可读性极差。要求仅依赖GNU coreutils等基础工具，兼容busybox/dash/bash，禁止使用编译器、Perl等，且awk处理二进制输入性能不足，需更优方案。

推荐实现 #

通用动态N版本 #

兼顾兼容性、可读性与性能，支持任意正整数N：

paddingN() {
    local N="$1"
    # 校验输入合法性
    [ -z "$N" ] || ! [ "$N" -gt 0 ] && echo "Error: N must be a positive integer" >&2 && return 1

    local temp=$(mktemp)
    # 按N字节块读取输出，剩余不足一块的内容会留在临时文件
    dd status=none bs="$N" of="$temp" conv=notrunc 2>&1 || { rm -f "$temp"; return 1; }
    local remaining=$(stat -c%s "$temp")
    local pad=$(( (N - remaining % N) % N ))

    # 输出已有内容，再补对应数量的NUL字节
    cat "$temp"
    if [ "$pad" -gt 0 ]; then
        printf "%${pad}s" '' | tr ' ' '\0'
    fi
    rm -f "$temp"
}

固定N（如N=4）优化版 #

无需动态传参时，可简化为无临时文件的实现，性能更优：

padding4() {
    # 读取所有4字节块，最后不足一块的内容会被dd输出到stdout
    local last_chunk
    last_chunk=$(dd status=none bs=4 2>&1)
    local pad=$(( (4 - ${#last_chunk}) % 4 ))
    # 输出最后一块+补位NUL
    printf "%s" "$last_chunk"
    [ "$pad" -gt 0 ] && printf "%${pad}s" '' | tr ' ' '\0'
}

方案优势 #

• 通用版通过临时文件暂存剩余字节，避免了dd conv=sync处理小块时的性能瓶颈，同时兼容所有符合POSIX标准的Shell环境
• 固定N版直接捕获dd输出的剩余内容，无需临时文件，性能接近tee+wc+dd的组合，但可读性大幅提升
• 完全依赖coreutils的基础工具（dd、stat、printf、tr、mktemp），满足依赖最小化要求，兼容busybox/dash/bash
• 处理二进制输入无性能损耗，适配超大字节流场景

内容的提问来源于stack exchange，提问作者anx