Unix|Spark场景下bash传递带空格引号参数无需手动转义方案求助

核心原理 #

你遇到的参数拆分问题不是传参阶段的问题，是脚本内部引用变量时没有正确加双引号导致的bash自动分词。正常执行./shell.sh "col IN ('abc')"时，$1本身已经是完整的单个字符串，不需要用户做额外转义。

最简实现方案 #

直接在脚本中所有引用该参数的位置用双引号包裹变量即可，示例脚本如下：

#!/bin/bash
# 接收传入的过滤条件，双引号包裹避免提前分词
FILTER="$1"

# 调用spark-submit时，变量必须加双引号传递
spark-submit \
  --class com.your.job.Main \
  your_job.jar \
  --filter-condition "${FILTER}"

用户使用时直接执行你要求的格式即可，无需任何转义：

./shell.sh "col IN ('abc')"

多动态参数场景适配 #

如果需要拼接多个动态参数，使用bash数组存储参数列表，彻底避免分词问题：

#!/bin/bash
# 初始化固定参数数组
PARAMS=(
  --class com.your.job.Main
  --master yarn
  --deploy-mode cluster
  your_job.jar
)

# 追加过滤条件参数
if [[ -n "$1" ]]; then
  PARAMS+=(--filter-condition "$1")
fi

# 展开数组时必须加双引号
spark-submit "${PARAMS[@]}"

注意事项 #

• 禁止直接写不带双引号的$FILTER或$PARAMS，否则bash会自动对内容按空格拆分参数
• 如果过滤条件中存在双引号，用户可以选择用单引号包裹外层参数：./shell.sh 'col IN ("abc")'，脚本逻辑无需修改

内容的提问来源于stack exchange，提问作者username89