如何用Linux命令提取日志中同一分隔符首尾间的内容？

我来帮你解决这个问题——你的需求是从日志里提取第一次出现指定分隔符到最后一次出现该分隔符之间的所有内容，之前尝试的awk命令无效是因为语法和逻辑都有问题，下面我给你几种实用的Linux命令实现方案：

一、用awk实现（大文件友好） #

如果日志文件很大，推荐这种逐行记录行号的方式，不会占用太多内存：

BEGIN {
    # 定义你的分隔符
    sep = "i8732jddcd234"
    start_line = 0
    end_line = 0
}
# 每遇到分隔符，更新起始和结束行号
$0 ~ sep {
    if (start_line == 0) start_line = NR  # 只记录第一次出现的行号
    end_line = NR  # 每次遇到都更新为当前行号，最后就是末次出现的行号
}
END {
    # 确认找到过分隔符才继续
    if (start_line > 0 && end_line >= start_line) {
        # 重新读取文件，输出指定行范围
        while ((getline line < FILENAME) > 0) {
            if (NR >= start_line && NR <= end_line) print line
            if (NR > end_line) exit  # 输出完就退出，不用读剩下的内容
        }
        close(FILENAME)
    }
}

使用方式：把上面的代码保存为extract.awk，然后执行：

awk -f extract.awk test.log

如果你觉得两次读文件麻烦，也可以把整个日志读入内存处理（适合小文件）：

BEGIN { sep = "i8732jddcd234" }
# 把所有内容存入缓冲区
{ buf = buf $0 "\n" }
END {
    # 找第一次出现的位置
    match(buf, sep)
    first_pos = RSTART
    if (first_pos == 0) exit  # 没找到分隔符直接退出
    
    # 循环找最后一次出现的位置
    current_pos = first_pos + RLENGTH
    last_pos = first_pos
    while (match(substr(buf, current_pos), sep)) {
        last_pos = current_pos + RSTART - 1
        current_pos = last_pos + RLENGTH
    }
    
    # 截取并输出内容
    print substr(buf, first_pos, last_pos + RLENGTH - first_pos)
}

二、用sed+grep组合实现（直观易理解） #

这种方式先通过grep拿到分隔符首次和末次出现的行号，再用sed输出对应范围的内容：

1. 先获取行号：

# 首次出现的行号
start=$(grep -n "i8732jddcd234" test.log | head -n1 | cut -d: -f1)
# 末次出现的行号
end=$(grep -n "i8732jddcd234" test.log | tail -n1 | cut -d: -f1)

2. 用sed输出指定行范围：

sed -n "${start},${end}p" test.log

可以把这两行合并成一条命令：

start=$(grep -n "i8732jddcd234" test.log | head -n1 | cut -d: -f1); end=$(grep -n "i8732jddcd234" test.log | tail -n1 | cut -d: -f1); sed -n "${start},${end}p" test.log

三、为什么你之前的awk命令无效？ #

你写的awk /'i8732jddcd234','i8732jddcd234'/ test.log有两个问题：

1. 语法错误：awk的范围模式应该是/pattern1/,/pattern2/，不需要加单引号包裹模式；
2. 逻辑问题：即使语法正确，awk '/i8732jddcd234/,/i8732jddcd234/' test.log会匹配每一对分隔符之间的内容，比如日志里有3次分隔符，它会输出第1到第2行、第3到第3行，而不是你需要的第1到第3行的整体内容。

内容的提问来源于stack exchange，提问作者yuzhen