如何编写Linux Bash脚本:比对两文本首列后按规则合并生成新文件
BASH合并实现脚本
#!/bin/bash set -euo pipefail # 声明关联数组,以ID为键,存储file2中对应ID的所有非ID列拼接内容 declare -A id_mapping # 读取file2构建映射关系 while IFS= read -r raw_line; do # 清除行首尾多余空白 clean_line=$(sed 's/^[[:space:]]*//;s/[[:space:]]*$//' <<< "$raw_line") [[ -z "$clean_line" ]] && continue # 按逗号拆分字段 IFS=',' read -ra col_arr <<< "$clean_line" # 提取首列ID,清除字段前后空格 cur_id=$(sed 's/^[[:space:]]*//;s/[[:space:]]*$//' <<< "${col_arr[0]}") # 收集当前行除首列外的所有字段,统一清除前后空格 valid_cols=() for ((idx=1; idx<${#col_arr[@]}; idx++)); do valid_col=$(sed 's/^[[:space:]]*//;s/[[:space:]]*$//' <<< "${col_arr[$idx]}") valid_cols+=("$valid_col") done # 按统一分隔符拼接,追加到对应ID的映射值中(保留file2内同ID行的出现顺序) cur_suffix=$(IFS=', '; echo "${valid_cols[*]}") if [[ -n "${id_mapping[$cur_id]:-}" ]]; then id_mapping[$cur_id]="${id_mapping[$cur_id]}, $cur_suffix" else id_mapping[$cur_id]="$cur_suffix" fi done < file2 # 严格按file1原有行顺序输出合并结果 while IFS= read -r raw_line; do clean_line=$(sed 's/^[[:space:]]*//;s/[[:space:]]*$//' <<< "$raw_line") [[ -z "$clean_line" ]] && continue IFS=',' read -ra col_arr <<< "$clean_line" cur_id=$(sed 's/^[[:space:]]*//;s/[[:space:]]*$//' <<< "${col_arr[0]}") # 匹配到对应ID则拼接后缀,无匹配则保留原行内容 if [[ -n "${id_mapping[$cur_id]:-}" ]]; then echo "$clean_line, ${id_mapping[$cur_id]}" else echo "$clean_line" fi done < file1 > merged_output.txt
核心特性
- 全程按file1的原始行序遍历输出,不会打乱原文件的行排列逻辑
- 自动清除所有字段前后的多余空格、行首空白字符,最终输出的字段分隔符统一为
,,完全匹配示例格式 - 按file2中的原始出现顺序拼接同一ID的所有非ID列内容,不调整file2内同ID行的先后顺序
- 脚本运行完成后,合并结果直接写入当前目录的
merged_output.txt文件
内容的提问来源于stack exchange,提问作者Andrea
相关产品推荐
相关产品推荐

