Docker部署Zeppelin调用Spark报错：找不到spark-submit路径

报错中提到的/Usuarios/diegomartincastronuovo/sources/spark-3.0.1/bin/spark-submit是本地机器的文件路径，但Docker容器与本地文件系统默认是隔离的——容器内部根本不存在这个路径，所以即使你修改了Zeppelin解释器或容器的SPARK_HOME配置，依然会触发找不到文件的错误。

1. 挂载本地Spark目录到Docker容器 #

启动Zeppelin容器时，使用-v参数将本地Spark目录映射到容器内的一个可访问路径。示例命令：

docker run -d -p 8080:8080 \
  -v /Usuarios/diegomartincastronuovo/sources/spark-3.0.1:/opt/spark \
  --name zeppelin apache/zeppelin:latest

这里将本地Spark目录挂载到容器内的/opt/spark路径下，确保容器能访问到Spark的二进制文件。

2. 配置Zeppelin的Spark解释器 #

1. 打开Zeppelin网页控制台，进入Interpreter页面，找到spark解释器。
2. 修改核心配置项：
   • 将SPARK_HOME设置为容器内的挂载路径：/opt/spark
   • 确保spark.submit.deployMode设置为client（适配本地Spark的运行模式）
3. 保存配置后，重启Spark解释器。

3. 验证修复结果 #

在Zeppelin Notebook中重新执行测试代码：

%spark
spark.sparkContext.getConf.toDebugString

此时应能正常返回Spark的配置信息，不再出现文件找不到的错误。

额外注意事项 #

• 确认Spark版本与Zeppelin兼容：Spark 3.0.1需要搭配Zeppelin 0.9.x及以上版本。
• 若出现权限问题，启动容器时可添加--user $(id -u):$(id -g)参数，让容器内用户拥有挂载目录的访问权限：

  docker run -d -p 8080:8080 \
    -v /Usuarios/diegomartincastronuovo/sources/spark-3.0.1:/opt/spark \
    --user $(id -u):$(id -g) \
    --name zeppelin apache/zeppelin:latest
  

内容的提问来源于stack exchange，提问作者Diego