如何使用grep仅检索non-reg目录下sim.log末尾100行的TEST PASSED
优化检索方案
核心逻辑是跳过sim.log的前面内容,仅提取每个文件最后100行做匹配,可将检索速度提升数倍到数十倍,适配上千份测试的场景。
基础版命令(单进程,无额外依赖)
find non-reg -name "sim.log" -type f -exec sh -c 'tail -n 100 "$0" | grep -qi "TEST PASSED" && echo "$0: TEST PASSED"' {} \; > test_passed.txt
参数说明:
find non-reg -name "sim.log" -type f:递归定位non-reg目录下所有sim.log普通文件tail -n 100 "$0":仅读取当前文件最后100行,无需加载整个大体积日志grep -qi:-q为静默匹配,匹配到目标字符串就返回成功状态,-i保留你原命令的忽略大小写规则- 最终输出格式和你原grep命令一致,所有匹配到的结果会写入test_passed.txt
加速版命令(多进程并行,适配上千份测试)
如果测试量超过1000份,可开启并行处理进一步压缩耗时:
find non-reg -name "sim.log" -type f -print0 | xargs -0 -P 8 -I {} sh -c 'tail -n 100 "{}" | grep -qi "TEST PASSED" && echo "{}: TEST PASSED"' > test_passed.txt
参数说明:
-print0+xargs -0:适配路径带空格、特殊字符的场景,避免执行报错-P 8:同时启动8个并行任务,可根据你的CPU核心数调整数值,性能充足的前提下耗时可降到单进程的1/5~1/8
保留匹配行内容的适配方案
如果你需要和原grep命令一样输出匹配到的具体行内容,可调整为如下命令:
find non-reg -name "sim.log" -type f -exec sh -c 'tail -n 100 "$0" | grep -i "TEST PASSED" | sed "s|^|$0: |"' {} \; > test_passed.txt
输出格式为文件路径: 匹配到的TEST PASSED所在行内容,和原grep -r的输出完全一致。
内容的提问来源于stack exchange,提问作者dtgcapo
相关产品推荐
相关产品推荐

