如何让awk处理所有子目录中的解压后文件？

原脚本问题分析 #

• for file in *仅遍历顶层目录的文件/目录，无法覆盖子目录内容
• gunzip -cf $(find . -type f) "$file"逻辑错误：find输出的所有文件会被作为gunzip的参数，导致压缩文件识别混乱，最终仅能处理顶层目录的$file

正确实现方式 #

方法1：find + exec 处理单个压缩文件

find . -type f -name "*.gz" -exec sh -c '
  gunzip -c "$1" | awk -v f="$1" "NF > 0 {print f; nextfile}"
' sh {} \;

• find . -type f -name "*.gz"：递归查找所有子目录下的gz压缩文件
• -exec sh -c '...' sh {} \;：对每个找到的文件执行shell命令，{}代表当前文件的完整路径
• gunzip -c "$1"：解压文件并输出到标准输出，避免修改原文件
• 管道传递给awk，通过-v f="$1"将文件路径传入awk变量，执行自定义逻辑

方法2：用zcat兼容多种压缩格式

如果需要处理gz、bz2、Z等多种压缩格式，可替换gunzip为zcat（自动识别压缩类型）：

find . -type f \( -name "*.gz" -o -name "*.bz2" -o -name "*.Z" \) -exec sh -c '
  zcat "$1" | awk -v f="$1" "NF > 0 {print f; nextfile}"
' sh {} \;

方法3：xargs提升批量处理效率

用xargs减少重复启动shell进程的开销：

find . -type f -name "*.gz" | xargs -I {} sh -c '
  gunzip -c "{}" | awk -v f="{}" "NF > 0 {print f; nextfile}"
'

内容的提问来源于stack exchange，提问作者manishma