Shell脚本：移除逗号分隔字符串指定值并清理多余首尾逗号

这里提供几种可靠的方法来处理逗号分隔列表的元素移除，确保最终结果没有首尾多余逗号：

方法1：使用awk（推荐，处理复杂场景更稳定） #

把两个列表转换成awk数组，遍历主列表并过滤掉需要移除的元素，最后用逗号拼接结果：

MAIN_ENV="dev,qa,qa1,qa2,stage,perf,perf1,UAT"
ENV_TO_REMOVE_FROM_LIST="qa1,perf"

echo "$MAIN_ENV" | awk -v remove="$ENV_TO_REMOVE_FROM_LIST" '
BEGIN {
    FS = ",";
    OFS = ",";
    # 将需要移除的元素存入数组
    n = split(remove, remove_arr, ",");
    for (i=1; i<=n; i++) {
        remove_set[remove_arr[i]] = 1;
    }
}
{
    # 遍历主列表元素，保留不在移除集合里的
    result_count = 0;
    for (i=1; i<=NF; i++) {
        if (!($i in remove_set)) {
            result[++result_count] = $i;
        }
    }
    # 拼接结果并输出
    if (result_count > 0) {
        print result[1];
        for (i=2; i<=result_count; i++) {
            printf "%s%s", OFS, result[i];
        }
        printf "\n";
    }
}'

运行后输出：dev,qa,qa2,stage,perf1,UAT

方法2：纯Bash内置实现（无需外部工具） #

利用Bash的数组和字符串操作完成过滤：

MAIN_ENV="dev,qa,qa1,qa2,stage,perf,perf1,UAT"
ENV_TO_REMOVE_FROM_LIST="qa1,perf"

# 将主列表转为数组
IFS=',' read -r -a main_arr <<< "$MAIN_ENV"
# 将移除列表转为关联数组（用于快速判断）
declare -A remove_set
IFS=',' read -r -a remove_arr <<< "$ENV_TO_REMOVE_FROM_LIST"
for elem in "${remove_arr[@]}"; do
    remove_set["$elem"]=1
done

# 收集保留的元素
result_arr=()
for elem in "${main_arr[@]}"; do
    if [[ -z "${remove_set[$elem]}" ]]; then
        result_arr+=("$elem")
    fi
done

# 用逗号拼接结果
IFS=',' joined_result="${result_arr[*]}"
echo "$joined_result"

输出同样是干净的列表，如果主列表为空或所有元素都被移除，会输出空字符串（无多余逗号）。

方法3：sed正则替换（适合简单场景） #

通过正则匹配需要移除的元素，注意处理首尾和中间的逗号边界：

MAIN_ENV="dev,qa,qa1,qa2,stage,perf,perf1,UAT"
ENV_TO_REMOVE_FROM_LIST="qa1,perf"

# 把移除列表转为正则匹配模式（如：qa1|perf）
remove_pattern=$(echo "$ENV_TO_REMOVE_FROM_LIST" | tr ',' '|')

# 先移除所有匹配的元素及前后可能的逗号，再清理首尾残留的逗号
cleaned=$(echo "$MAIN_ENV" | sed -E "s/(^|,)$remove_pattern(,|$)/\1\2/g; s/^,//; s/,$//; s/,,/,/g")
echo "$cleaned"

注意：这种方法如果移除的元素包含正则特殊字符（如.、*）需要提前转义，适合元素都是普通字符串的场景。

内容的提问来源于stack exchange，提问作者KNCK