使用bash实现双列无序匹配 查找两个CSV文件的公共行
无顺序双列CSV匹配Bash实现
直接执行以下命令即可得到符合要求的输出:awk -F, ' FNR==NR { if (FNR == 1) next key = ($1 < $2) ? $1"|"$2 : $2"|"$1 match_keys[key] = 1 next } { if (FNR == 1) next key = ($1 < $2) ? $1"|"$2 : $2"|"$1 if (key in match_keys) print $1","$2 } ' f1.csv f2.csv
命令输出与示例预期完全一致:
Tox1,Cpne1
核心逻辑说明:
- 遍历f1.csv时跳过表头,对每行前两列按字符串顺序排序后拼接为唯一匹配键,彻底消除前后列顺序对匹配的影响
- 遍历f2.csv时按相同规则生成匹配键,命中预存键集合时,直接输出该行原始顺序的前两列,不强行统一输出顺序
- 拼接键时使用
|作为分隔符,避免列值本身包含逗号导致的匹配冲突
特殊场景适配:
- 若CSV存在双引号包裹、内部含逗号的复杂字段,可替换为支持标准CSV解析的工具结合上述键生成规则实现,核心逻辑无需调整
内容的提问来源于stack exchange,提问作者Apex
相关产品推荐
相关产品推荐

