如何在Databricks中运行ScalaTest？缺失配置排查

问题原因分析 #

你遇到的“找不到AnyFunSuite类型”和“should不是org.scalatest.matchers的成员”错误，主要源于Scala版本与jar包不匹配、导入路径不正确、jar包未被集群正确加载这几类问题。

具体解决步骤 #

• 确认Scala版本匹配
  检查Databricks集群配置中的Scala版本，必须与你上传的scalatest_2.13-3.2.13.jar的Scala版本一致（即2.13）。如果集群使用的是2.12版本，需要替换为对应2.12的ScalaTest jar包（如scalatest_2.12-3.2.13.jar）。

• 修正代码导入语句
  ScalaTest 3.x版本中，matchers的导入路径需要明确，修改代码如下（两种方式任选其一）：
  方式一：明确导入所需类

  import org.scalatest.funsuite.AnyFunSuite
  import org.scalatest.matchers.should.Matchers
  
  class ArithmeticSuite extends AnyFunSuite with Matchers {
     test("addition works") { 
       1 + 1 should equal(2)
     } 
  } 
  run(new ArithmeticSuite)
  

  方式二：通配导入matchers包

  import org.scalatest._
  import org.scalatest.matchers.should._
  
  class ArithmeticSuite extends AnyFunSuite with Matchers {
     test("addition works") { 
       1 + 1 should equal(2)
     } 
  } 
  run(new ArithmeticSuite)
  

• 确保jar包正确加载

  1. 进入集群的「Libraries」页面，确认你上传的ScalaTest jar包状态为「Attached」，若状态异常则重新添加。
  2. 若全局加载有问题，可在Notebook中临时添加依赖（替换为你的jar包在DBFS的实际路径）：

     %scala
     Classpath.addJar("dbfs:/FileStore/jars/scalatest_2.13-3.2.13.jar")
     

内容的提问来源于stack exchange，提问作者user13800089