在VS Code运行PySpark脚本报错：No module named 'pyspark'求助

以下是几种针对性的解决方案：

1. 切换VS Code使用的Python解释器到Jupyter对应的环境 #

Jupyter能正常运行说明PySpark已安装在它使用的Python环境中，VS Code大概率用了不同的环境：

• 在Jupyter Notebook中执行以下代码，获取当前环境的Python路径：

  import sys
  print(sys.executable)
  

• 打开VS Code，点击右下角显示的Python版本号，在弹出的列表中选择上述输出的路径对应的解释器。

2. 在VS Code当前环境中安装PySpark #

如果切换解释器后仍报错，直接在VS Code的终端中安装PySpark：

• 激活当前使用的Python环境（如conda环境执行conda activate your_env）
• 执行安装命令：

  pip install pyspark
  

3. 配置Spark相关环境变量（适用于本地Spark集群场景） #

如果是手动部署的Spark集群而非通过pip安装，需要配置环境变量：

• 在系统环境变量中添加：
  • SPARK_HOME：设置为你的Spark安装根目录（如/opt/spark-3.5.0）
  • PATH：追加${SPARK_HOME}/bin
  • PYTHONPATH：设置为${SPARK_HOME}/python:${SPARK_HOME}/python/lib/py4j-<version>-src.zip（替换<version>为你的Py4J版本号，可在Spark安装目录的python/lib下查看）
• 若仅需在VS Code中生效，可在.env文件中添加上述变量，VS Code会自动加载该文件的环境变量。

4. 调试模式下配置launch.json #

如果使用VS Code的调试功能运行代码，需在launch.json中指定环境变量：

{
    "version": "0.2.0",
    "configurations": [
        {
            "name": "Python: Current File",
            "type": "python",
            "request": "launch",
            "program": "${file}",
            "console": "integratedTerminal",
            "env": {
                "SPARK_HOME": "/path/to/your/spark",
                "PYTHONPATH": "/path/to/your/spark/python:/path/to/your/spark/python/lib/py4j-0.10.9.7-src.zip"
            }
        }
    ]
}

内容的提问来源于stack exchange，提问作者Balaji