AWK批量处理文件输出异常：单文件合并所有内容问题排查

错误原因 #

• find命令的-exec参数中，重定向操作（>>）由当前shell处理，而非find本身。原脚本里的$output_folder/{}中的{}会被shell当作普通文件名，而非find匹配到的文件名占位符，因此所有处理结果都会被追加到输出文件夹下一个名为{}的文件中。
• 直接使用{}作为输出文件名还会保留输入文件的完整路径，比如输入文件是/path/to/input/file1.txt，输出路径会变成/path/to/output//path/to/input/file1.txt，这会因路径不存在导致报错。

修正后的脚本 #

通过sh -c将命令包裹在子shell中，让find传递的文件名参数能被正确解析，同时提取输入文件的纯文件名作为输出文件名：

input_folder="/path/to/input"
output_folder="/path/to/output"

# 确保输出文件夹存在，避免路径不存在报错
mkdir -p "$output_folder"

find "$input_folder" -type f -exec sh -c '
  for file do
    awk "! /rrsig/ && ! /dskey/ {print \$1,\";\",\$5}" "$file" > "$output_folder/$(basename "$file")"
  done
' sh {} +

关键改进点 #

• 用sh -c创建子shell，让find传递的每个文件名能被正确替换到重定向路径中。
• 使用basename "$file"提取输入文件的纯文件名，避免输出路径包含输入文件夹的层级结构。
• 改用>而非>>，确保每个输出文件仅对应单个输入文件的处理结果（若需要追加可改回，批量处理场景下覆盖更合理）。
• 增加mkdir -p "$output_folder"，提前确保输出文件夹存在。

内容的提问来源于stack exchange，提问作者NightShift