解析sed命令中双单引号的作用——基于重复ID行去重场景

首先拆分你提到的命令结构，核心可以拆解为两部分来理解：

1. -i ''的作用 #

这是BSD sed（比如macOS系统自带的sed）的语法要求：-i选项用于原地修改文件，必须指定备份文件的后缀。如果不需要保留原文件的备份，就需要传入空后缀——也就是''（两个单引号表示空字符串）。如果是Linux系统的GNU sed，直接写-i即可，不需要额外的空后缀。

2. 脚本部分的引号逻辑 #

你看到的''"${index_array[*]/%/d;}"''本质是shell的字符串拼接：

• ''是一对空的单引号，本身不会向命令添加任何字符；
• "${index_array[*]/%/d;}"是双引号包裹的变量扩展，作用是让shell先完成数组解析和字符串替换：
  1. ${index_array[*]}会把数组的所有元素用空格拼接成字符串；
  2. /%/d;是参数替换，把每个元素的末尾替换成d;，最终生成类似3d; 5d; 7d;的sed命令（表示删除第3、5、7行）。

为什么单个单引号无法生效？ #

如果用单引号直接包裹变量，比如sed -i '${index_array[*]/%/d;}' test.txt，shell会把单引号内的内容当作字面量，不会进行任何变量扩展或替换。sed收到的命令就是${index_array[*]/%/d;}，这显然不是有效的sed语法，自然无法执行。

关于「双单引号」的冗余性 #

实际上''"${index_array[*]/%/d;}"''这种写法是冗余的，直接写"${index_array[*]/%/d;}"效果完全一致。原脚本作者的写法可能是习惯使然，或者是为了强调sed命令需要被引号包裹，但核心逻辑始终是：必须用双引号让shell完成变量扩展，不能用单引号。

补充：更简洁的去重实现 #

你当前的方法步骤繁琐，其实可以用awk一行完成「保留首次出现ID行、删除后续重复行」的需求（假设ID是每行第一个字段，分隔符为逗号，可根据实际情况调整）：

awk -F',' '!seen[$1]++' test.txt > tmp.txt && mv tmp.txt test.txt

内容的提问来源于stack exchange，提问作者Yama