You need to enable JavaScript to run this app.
优惠活动
大模型
产品
解决方案
定价
更多

Windows11下spark-shell/pyspark启动失败求助(附报错日志)

解决Windows 11下Spark 3.2.0启动时的java.net.URISyntaxException错误

针对你遇到的启动报错,核心原因是路径包含Java URI解析不允许的非法字符(比如空格、中文、特殊符号),按以下步骤排查解决:

  • 检查安装路径是否合规
    确认Spark、Hadoop的安装路径,以及SPARK_HOME、HADOOP_HOME环境变量指向的路径,不能包含空格、中文或&、@这类特殊符号。比如避免使用C:\Program Files\Spark这类路径,改为C:\Spark\spark-3.2.0这类纯英文无空格的路径。
    可以在命令行执行以下命令验证路径:

    echo %SPARK_HOME%
    echo %HADOOP_HOME%
    
  • 手动指定Spark临时目录
    Windows系统默认临时目录可能因用户名带特殊字符导致问题,可手动配置Spark的本地临时目录:

    1. 进入Spark安装目录的conf文件夹,复制spark-env.cmd.template并重命名为spark-env.cmd
    2. 在文件中添加以下配置(确保对应的目录已提前创建):
      SET SPARK_LOCAL_DIRS=C:\Spark\tmp
      SET HADOOP_TMP_DIR=C:\Hadoop\tmp
      
  • 验证Hadoop依赖文件
    确认HADOOP_HOME\bin目录下存在与Hadoop 3.2.0匹配的winutils.exe和hadoop.dll文件,这是Windows下Hadoop正常运行的必要组件。可执行hadoop version命令,确认Hadoop本身能正常启动,排除Hadoop路径相关问题。

  • 临时启动参数指定
    如果不想修改配置文件,可在启动时通过参数临时指定临时目录:

    spark-shell --conf spark.local.dir=C:\Spark\tmp
    pyspark --conf spark.local.dir=C:\Spark\tmp
    

内容的提问来源于stack exchange,提问作者J. Chae

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.07.05 00:02:08