运行中Standalone Spark Master执行stop-master.sh报错无对应进程可停止的原因

我之前也踩过这个坑！明明看着Spark Master进程在跑，执行./sbin/stop-master.sh却提示找不到要停止的进程，通常是以下几个原因导致的，对应解决办法也给你列出来了：

• PID文件丢失或路径不匹配
  Spark的停止脚本是靠启动时生成的PID文件来定位进程的，默认这个文件存在$SPARK_HOME/logs或者$SPARK_HOME/work目录下（不同版本可能有差异）。如果这个文件被误删、权限不足，或者启动Master时指定了自定义PID路径但停止脚本没对应上，就会找不到进程。
  解决步骤：

  1. 手动查找Master进程ID：ps aux | grep org.apache.spark.deploy.master.Master，从输出里找到对应的PID（注意排除grep本身的进程）。
  2. 手动终止进程：kill <找到的PID>，如果进程没响应就用kill -9 <PID>强制终止。
  3. 后续启动Master时，可以显式指定PID文件目录：./sbin/start-master.sh --pid-dir /your/secure/path，或者在$SPARK_HOME/conf/spark-env.sh里配置SPARK_PID_DIR变量，确保停止脚本能找到这个路径。

• 启动和停止的用户不一致
  如果你用用户A启动了Master，现在用用户B来执行停止脚本，由于Linux的权限隔离，用户B要么看不到用户A的进程，要么访问不到用户A生成的PID文件，自然就会报错。
  解决办法：切换到启动Master的用户再执行停止命令，比如sudo -u <userA> ./sbin/stop-master.sh，或者直接用用户A的终端执行脚本。

• Spark环境变量配置不一致
  停止脚本依赖SPARK_HOME等环境变量来定位日志和PID文件。如果执行停止脚本时的SPARK_HOME和启动Master时的不一样，或者spark-env.sh里的配置有变动，脚本就会找错地方。
  解决步骤：

  1. 检查当前终端的SPARK_HOME：echo $SPARK_HOME，确认和启动Master时的路径一致。
  2. 如果不一致，先设置正确的环境变量：export SPARK_HOME=/path/to/your/spark-install，再执行./sbin/stop-master.sh。
  3. 也可以直接在命令前指定环境变量：SPARK_HOME=/path/to/your/spark ./sbin/stop-master.sh。

• 进程匹配规则不兼容
  有些情况下，启动Master时加了特殊的JVM参数，可能导致进程名和停止脚本里默认的匹配规则（找org.apache.spark.deploy.master.Master类名）不匹配。
  解决办法：用jps命令查看所有Java进程，找到标记为Master的进程，然后用kill <PID>手动终止。后续启动Master尽量使用默认命令，避免修改可能影响进程识别的参数。

内容的提问来源于stack exchange，提问作者AravindR