Spark 2.3安装后执行spark-submit报错：找不到指定主类

我之前在Windows环境部署Spark时也踩过这个坑，给你几个针对性的排查方向，应该能定位到问题：

1. 检查Spark安装包是否正确 #

这个错误最常见的原因是下载了Spark的源码包而非预编译的二进制包。Spark 2.3的预编译包命名格式通常是spark-2.3.x-bin-hadoopx.x.tgz，而源码包是不带-bin-hadoopx.x后缀的。

• 验证方式：进入$SPARK_HOME/jars目录，检查是否存在spark-launcher_2.11-2.3.x.jar（版本号对应你的Spark版本）。如果没有这个文件，说明你下载的是源码包，需要重新下载预编译的二进制包。
• 解压时要确保文件完整，不要中断解压过程，避免部分jar包丢失。

2. 验证环境变量配置是否生效且正确 #

虽然你已经在.bashrc里配置了变量，但可能存在配置错误或未生效的情况：

• 重新加载环境变量：执行source ~/.bashrc，或者关闭当前Gitbash窗口重新打开，确保配置的变量生效。
• 检查SPARK_HOME路径：执行echo $SPARK_HOME，确认路径是否正确，注意Windows路径中的空格需要转义或用引号包裹，比如C:/Program\ Files/Spark或"C:/Program Files/Spark"，避免因路径解析错误导致找不到jar包。
• 检查其他变量：执行echo $JDK_HOME、echo $HADOOP_HOME，确认这些路径都指向正确的安装目录，且没有拼写错误。

3. 确认Hadoop环境配置（Windows必备） #

Windows下运行Spark依赖Hadoop的winutils.exe，如果HADOOP_HOME配置不当也会引发类加载错误：

• 确保HADOOP_HOME指向的目录下存在bin/winutils.exe，建议下载与Spark兼容的Hadoop版本（Spark 2.3推荐Hadoop 2.7）。
• 检查PATH变量是否包含$HADOOP_HOME/bin，确保winutils能被系统找到。

4. 验证Java版本兼容性 #

Spark 2.3仅支持JDK 8，使用更高版本（如JDK 11+）会出现兼容性问题：

• 执行java -version，确认输出是1.8.x版本。
• 确保JDK_HOME指向的是JDK 8的安装目录，而非JRE或更高版本的JDK。

5. 直接测试Spark基础命令 #

进入$SPARK_HOME/bin目录，执行./spark-submit --version，如果能正常输出Spark版本信息，说明环境配置没问题，可能是你之前的命令执行路径或写法有误。

内容的提问来源于stack exchange，提问作者madmatrix