已安装databricks-connect仍报错ModuleNotFoundError: No module named 'databricks'

你的猜测是对的——databricks.connect和databricks-connect完全是两回事，这就是报错的核心原因：

• 旧版Databricks Connect（对应Databricks Runtime 13.3 LTS及更早版本）的官方包是databricks-connect，它的导入逻辑沿用传统PySpark路径，根本没有databricks.connect这个模块，正确导入方式是用from pyspark.sql import SparkSession。你装的9.1.39属于旧版包，自然找不到databricks模块。
• 新版Databricks Connect（对应Databricks Runtime 13.3 LTS及之后版本）已经改用databricks-sdk包，这时候才支持from databricks.connect import DatabricksSession的导入方式。

解决办法 #

• 若要使用新版的databricks.connect：
  先卸载旧包，安装新版SDK：

  pip uninstall databricks-connect -y
  pip install databricks-sdk
  

  同时要确认你的Databricks工作区和集群版本在13.3 LTS及以上。
• 若要继续使用旧版databricks-connect9.1.39：
  改用旧版导入代码：

  from pyspark.sql import SparkSession
  
  spark = SparkSession.builder.getOrCreate()
  

内容的提问来源于stack exchange，提问作者MrMuppet