如何在bash中高效计算文件第二行起所有行与首行的对应字段差值

针对逐字段计算首行与后续行差值的需求，awk是最高效的实现方案，全程仅遍历一次文件，所有逻辑在单个进程内完成，完全避免了shell do循环逐行读取、反复调用外部工具拆分字段/做运算的进程切换开销，处理大文件时性能优势可达数十倍。

你提供的参考代码逻辑基本正确，但缺少首行输出的步骤，和期望输出不符，调整后的可直接运行的完整代码如下：

awk '
# 处理首行：缓存字段+直接输出
NR == 1 {
    print
    for (i = 1; i <= NF; i++) head[i] = $i
    next
}
# 处理后续行：逐字段计算差值输出
{
    for (i = 1; i <= NF; i++) {
        # %3d 用于对齐输出格式，和你给出的预期效果一致
        printf "%3d ", head[i] - $i
    }
    printf "\n"
}' input.dat

补充说明： #

• 如果文件字段是小数，只需将格式化符%3d替换为浮点格式即可，比如保留两位小数用%6.2f
• 如果字段分隔符不是默认的空格/制表符，可通过-F参数指定，比如逗号分隔的文件就加参数-F,
• 该实现仅占用缓存首行字段的极小内存，无需加载整个文件到内存，处理百万行级大文件也不会有性能或内存压力

内容的提问来源于stack exchange，提问作者BabaYaga