如何使用sed命令在目录多文件中匹配日期模式范围并导出内容

没问题！我来帮你搞定用sed提取指定日期区间日志的需求，不管是单个未压缩的日志文件，还是归档后的.gz压缩文件都能处理。

首先，针对你现有的单个日志文件FileMoverTransfer.log，可以把命令调整得更严谨些，避免变量引用的问题：

start_date="20180401"
end_date="20180404"
sed -n '/^'"$start_date"'/,/^'"$end_date"'/p' FileMoverTransfer.log > extracted_logs.txt

这里的^确保我们只匹配行首的日期（避免误匹配日志内容里的日期），把结果输出到extracted_logs.txt文件里。如果你的日志日期是带时间的格式（比如20180401 09:15:30），只要把start_date和end_date改成对应的开头格式就行。

接下来处理那些带日期后缀的.gz压缩归档文件，比如FileMoverTransfer.log-20180404-xxxxxx.gz，我们可以用zcat（部分系统用gzcat）读取压缩内容，再配合sed过滤：

处理单个压缩归档文件 #

如果只需要处理某一个压缩文件，直接用管道把内容传给sed，然后追加到输出文件：

zcat FileMoverTransfer.log-20180404-xxxxxx.gz | sed -n '/^'"$start_date"'/,/^'"$end_date"'/p' >> extracted_logs.txt

批量处理多个压缩归档文件 #

要是有一堆归档文件，而且想保证日志的时间顺序（旧日志在前，新日志在后），可以先按文件名排序，再批量处理：

start_date="20180401"
end_date="20180404"
# 按日期后缀排序压缩文件，依次处理并追加结果
ls FileMoverTransfer.log-*.gz | sort | while read compressed_file; do
    zcat "$compressed_file" | sed -n '/^'"$start_date"'/,/^'"$end_date"'/p' >> extracted_logs.txt
done
# 最后别忘了处理当前未归档的日志文件
sed -n '/^'"$start_date"'/,/^'"$end_date"'/p' FileMoverTransfer.log >> extracted_logs.txt

这里sort会按文件名的数字顺序排列归档文件，正好对应日志的生成顺序，合并后的结果就是完整的时间线日志。

小提示 #

• 如果你的日期不是在行首，就把sed模式里的^去掉，但这样可能会误匹配日志内容里的日期，所以尽量优先匹配行首的时间戳。
• 如果zcat命令报错，试试换成gzcat，不同系统的工具名称可能有差异。
• sed的区间匹配是包含起始行和结束行的，正好符合你要提取两个日期之间内容的需求，包括这两个日期的日志行。

内容的提问来源于stack exchange，提问作者Jake