如何在VS Code中使用远程Python解释器运行本地代码

1. 使用Remote Development扩展进行全远程环境开发 #

• 安装VS Code的「Remote - SSH」扩展，通过SSH连接到你的远程Spark服务器
• 连接成功后，在远程窗口中直接打开本地代码所在的目录（可通过远程文件管理器导入本地文件夹）
• 打开命令面板（快捷键Ctrl+Shift+P），执行Python: Select Interpreter，选择服务器上已配置好Spark依赖的Python环境（包括虚拟环境）
• 直接在VS Code中运行代码，代码会在远程服务器环境中执行，输出和调试信息同步返回本地窗口

2. 配置远程Python解释器（轻量化方案） #

• 确保本地VS Code已安装Python扩展
• 打开命令面板，执行Python: Select Interpreter -> Enter interpreter path -> Find
• 在文件浏览器中选择「SSH」选项，输入远程服务器的连接信息（如username@remote-host），导航到服务器上对应Spark环境的Python解释器路径（例如/opt/venv/spark/bin/python）
• 配置完成后，本地编写的代码会通过SSH提交到远程服务器的Python环境运行，完全复用服务器上的Spark依赖和配置

3. 直接提交代码到远程Spark集群 #

• 在本地代码中指定远程Spark集群的Master地址，示例代码：

from pyspark.sql import SparkSession

spark = SparkSession.builder \
    .master("spark://<远程服务器IP>:7077") \
    .appName("LocalSubmitToRemoteSpark") \
    .getOrCreate()

# 后续业务代码保持不变

• 本地安装与远程服务器Spark版本完全匹配的PySpark包（执行pip install pyspark==x.x.x替换版本号）
• 确保本地机器能访问远程服务器的Spark服务端口（7077、4040等，需提前开放防火墙规则）

内容的提问来源于stack exchange，提问作者Satyam Singh