使用Awk匹配含空格与特殊字符的变量时遇到的问题及求解

我有inputfile.txt和BigFile.txt两个数据集，需要在BigFile.txt中匹配inputfile.txt每行的两个变量（包含空格、$等特殊字符），要求两个变量同时存在才输出对应内容。直接使用固定字符串时Awk命令可正常执行，但将变量赋值后运行Awk命令却失效，相关代码示例如下，希望找出问题所在：

inputfile.txt内容 #

IFRA-SCN-01001B.brz.com Tower Sales
IFRA-SCN-01001B.brz.com Z$
IFRA-SCN-01001B.brz.com Pre-code$
IFRA-SCN-01001B.brz.com Technical Stuff
IFRA-SCN-01001B.brz.com expired$
IFRA-SCN-01001B.brz.com AA$
IFRA-SCN-01002B.brz.com Build Docs
IFRA-SCN-01002B.brz.com Build Docs

BigFile.txt内容 #

\\IFRA-SCN-01001B.brz.com\ABC PTR,John.Mayn@brz.com
\\IFRA-SCN-01001B.brz.com\ABC PTR,John.Mayn@brz.com
\\IFRA-SCN-01001B.brz.com\bitshare\DOC TRIGGER,Peter.Salez@brz.com
\\IFRA-SCN-01001B.brz.com\bitshare,Peter.Salez@brz.com
\\IFRA-SCN-01001B.brz.com\bitshare\PFM FRAUD,Peter.Salez@brz.com
\\IFRA-SCN-01001B.brz.com\Build Docs,Arlan.Boynoz@brz.com
\\IFRA-SCN-01001B.brz.com\Build Docs,Arlan.Boynoz@brz.com
\\IFRA-SCN-01002B.brz.com\Build Docs,Arlan.Boynoz@brz.com
\\IFRA-SCN-01002B.brz.com\Build Docs,Arlan.Boynoz@brz.com

有效命令示例 #

[root@brzmgmt]$ awk '/Build Docs/{ok=1;s=NR}ok && NR<=s+2 && /IFRA-SCN-01002B.brz.com/{print $0}' BigFile.txt
\\IFRA-SCN-01002B.brz.com\Build Docs,Arlan.Boynoz@brz.com
\\IFRA-SCN-01002B.brz.com\Build Docs,Arlan.Boynoz@brz.com

失效的Shell脚本代码 #

while read -r zz; do
        var1=`echo $zz | print '{print $1}'`
        var2=`echo $zz | print '{print $2}'`
        awk '/$var2/{ok=1;s=NR}ok && NR<=s+2 && /$va1/{print $0}' BigFile.txt # NOT_WORKING
        awk -v a=$var1 b=$var2 '/$b/{ok=1;s=NR}ok && NR<=s+2 && /$a/{print $0}' BigFile.txt # NOT_WORKING
done < inputfile.txt

疑问：我忽略了哪些细节导致命令失效？

1. 变量提取逻辑错误 #

你用echo $zz | print '{print $1}'提取变量完全错误：print不是文本处理命令，应该用awk完成字段提取；同时$zz未加引号，会导致带空格的字段被拆分。另外inputfile.txt中部分行的第二个变量包含空格（比如Tower Sales），用$2只能拿到第一个单词，正确的提取方式是：

# 直接用read拆分，rest变量包含第一个字段后的所有内容
while read -r var1 rest; do
    # 处理逻辑
done < inputfile.txt

2. Awk变量引用规则错误 #

• 单引号包裹的Awk代码中，Shell变量$var2不会被解析，Awk会把/$var2/当成字面量正则，匹配$var2这几个字符，而非变量的值。
• 用-v传递变量时，每个变量都需要单独加-v参数，且Awk内部直接用变量名即可，不需要加$（$b在Awk中代表第b个字段，不是变量b的值）。

3. 特殊字符未转义 #

变量中的$、.属于正则特殊字符，直接用正则匹配会出现异常（比如.会匹配任意字符），应该用字符串匹配（index()函数）或提前转义特殊字符。

正确脚本示例 #

循环调用Awk版本 #

while read -r var1 rest; do
    # 转义正则特殊字符：$和.
    escaped_rest=$(printf "%s" "$rest" | sed 's/\$/\\$/g; s/\./\\./g')
    awk -v host="$var1" -v keyword="$escaped_rest" '
        index($0, keyword) { ok=1; s=NR }
        ok && NR <= s+2 && index($0, host) { print $0 }
    ' BigFile.txt
done < inputfile.txt

高效单Awk处理版本（避免多次调用Awk） #

awk '
    NR==FNR {
        # 读取inputfile.txt，存储主机和对应关键词
        host = $1
        sub(/^[^ ]+ /, "") # 移除第一个字段，剩下的是关键词
        keywords[host] = keywords[host] "|" $0
        next
    }
    {
        # 处理BigFile.txt
        for (host in keywords) {
            kw_list = keywords[host]
            sub(/^|/, "", kw_list) # 移除开头多余的|
            if ($0 ~ kw_list && index($0, host)) {
                print $0
            }
        }
    }
' inputfile.txt BigFile.txt

内容的提问来源于stack exchange，提问作者gafm