使用IntelliJ编译Scala Spark项目时出现Extracting structure failed错误

你的build.sbt存在几个关键问题，直接导致了构建失败：

• Scala版本与Spark依赖不兼容：你指定的Scala版本是2.10.1，但Spark依赖spark-core_2.11是针对Scala 2.11系列编译的，两者主版本不匹配，无法正常解析依赖。
• Scala版本过于陈旧：Scala 2.10.1是多年前的旧版本，IntelliJ IDEA 2022.3.1对这类老版本的支持有限，容易出现结构解析错误。

修正后的build.sbt配置 #

ThisBuild / version := "0.1.0-SNAPSHOT"

// 使用与Spark 2.3.4兼容的Scala 2.11.x版本，推荐2.11.12
ThisBuild / scalaVersion := "2.11.12"

lazy val root = (project in file("."))
  .settings(
    name := "untitled"
  )

// 保持Spark依赖的Scala版本后缀与指定的Scala版本一致
libraryDependencies ++= Seq("org.apache.spark" % "spark-core_2.11" % "2.3.4")

后续操作步骤 #

1. 修正配置后，点击IntelliJ右侧的sbt面板，选择Refresh all sbt projects重新加载依赖。
2. 如果仍有报错，执行File -> Invalidate Caches...，选择"Invalidate and Restart"重启IDE，清理缓存。
3. 确保本地已安装对应版本的Scala（可通过scala -version检查），若未安装，IntelliJ会自动下载，需等待完成。

内容的提问来源于stack exchange，提问作者luckyluke