Spark-shell无法加载指定jar包，连接Cassandra时报NoClassDefFoundError

• 首先确认版本匹配：spark-cassandra-connector 3.1.0 要求Scala版本与Spark 3.1.2编译使用的Scala版本完全一致，Spark 3.1.2默认基于Scala 2.12构建，你的connector依赖必须携带_2.12后缀，若打包时使用了Scala 2.11或2.13版本都会触发类加载异常。

按照以下步骤逐一排查即可解决：

1. 校验spark-shell启动参数
   启动时必须使用绝对路径指定jar包位置，避免相对路径寻址失败，正确启动命令示例：

spark-shell --jars /<替换为你的jar包实际存储路径>/spark-cassandra-connector-assembly_2.12-3.1.0.jar

如果使用官方maven坐标拉取依赖，启动命令为：

spark-shell --packages com.datastax.spark:spark-cassandra-connector_2.12:3.1.0

2. 排查自定义fat jar打包问题
   你参考的指南对应的是1.x版本connector，打包规则不适配3.x版本，建议优先使用官方预构建的assembly包避免打包遗漏。如果需要自行打包，先执行以下命令校验目标类是否存在：

jar tf 你的fat jar完整路径 | grep com/datastax/spark/connector/util/Logging

如果命令无输出，说明打包时未正确引入connector核心依赖，需要修改打包配置，确保所有connector相关类都被打入jar包。

3. 验证日志级别配置
   如果未看到Added JAR相关日志，可能是Spark日志级别设置过高，启动时追加参数强制输出INFO级别日志即可验证加载状态：

spark-shell --jars 你的jar包完整路径 --conf spark.log.level=INFO

内容的提问来源于stack exchange，提问作者s1ri