Shell脚本问题：提取CSV中含指定数组值的字段

需求说明 #

现有inputdata1.txt文件内容如下：

id name gender

test.csv文件有多行多列数据，示例行如下：

/"id":"21"/, /"p1":"abc"/,  /"id":"22"/  
/"id":"23"/, /"p2":"zyx"/,  /"id":"24"/,  /"id":"25"/

需要提取test.csv中包含数组指定值（如id）的字段，输出格式要求同一行的匹配字段用空格分隔：

/"id":"21"/ /"id":"22"/
/"id":"23"/ /"id":"24"/ /"id":"25"/

问题现状 #

编写的Bash脚本尝试通过数组传递关键词给awk提取对应字段，但${keywords[$j]}在awk命令中无法被解析为实际值。脚本代码如下：

#!/bin/bash

declare -a keywords=(`cat inputdata1.txt`)

length=${#keywords[@]}

for (( j=0; j<length; j++ ));
do
awk -F, '{for (i=1;i<=NF;i++) if ($i~ "${keywords[$j]}") {print $i}}' test.csv
#awk -F, '{ for (i=1;i<=NF;i++) if($i~ "id") {print $i}}' test.csv

printf "Current index %d with value %s\n" $j "${keywords[$j]}"

done

尝试修改后的错误情况 #

1. 移除awk代码外层单引号后报错：

syntax error near unexpected token `('
test.sh: line 14: `  awk -F, {for (i=1;i<=NF;i++) if ($i~ "${keywords[$j]}") {print $i}} request.csv'

2. 将awk代码外层改为双引号后报错：

awk: syntax error at source line 1
 context is
    {for (i=1;i<=NF;i++) if >>>  (~ <<< 
awk: illegal statement at source line 1

解决方案 #

核心问题分析 #

awk的单引号会完全屏蔽Bash的变量解析，导致${keywords[$j]}无法被替换为实际的关键词；而直接用双引号包裹awk代码时，Bash会提前解析awk中的$i等变量，引发语法错误。

正确实现代码 #

通过awk的-v选项将Bash变量传递到awk环境中，同时调整输出逻辑满足格式要求：

#!/bin/bash

# 安全读取关键词到数组
read -ra keywords < inputdata1.txt

# 遍历每个关键词进行提取
for keyword in "${keywords[@]}"; do
    echo "=== 提取包含'$keyword'的字段 ==="
    awk -F, -v target="$keyword" '{
        result = ""
        for (i=1; i<=NF; i++) {
            # 匹配包含目标关键词的字段
            if ($i ~ target) {
                # 用空格拼接匹配到的字段
                result = result (result ? " " : "") $i
            }
        }
        # 仅输出非空结果
        if (result != "") print result
    }' test.csv
done

代码说明 #

1. read -ra keywords < inputdata1.txt：相比cat命令，这种方式更安全，能正确处理包含特殊字符的关键词。
2. awk -F, -v target="$keyword"：通过-v选项将Bash中的$keyword变量传递给awk的target变量，实现跨环境变量传递。
3. awk内部逻辑：遍历每行的所有字段，匹配到目标关键词后拼接成一行，最后输出整行结果，完全符合需求格式。
4. 循环遍历所有关键词，分别输出对应提取结果。

内容的提问来源于stack exchange，提问作者ASHOK DAUKIYA