Azure Databricks UC集群用户权限问题：ODBC驱动安装受阻

你遇到的是Unity Catalog Shared模式集群的安全限制——这类集群会使用动态生成的非root用户运行notebook命令，但集群初始化脚本本身是以root身份执行的，不需要额外提权，问题出在你混淆了初始化脚本和notebook内%sh命令的执行上下文。

以下是可行的解决方法：

方法1：修正初始化脚本，直接以root身份安装驱动 #

集群初始化脚本在节点启动阶段由root用户执行，无需额外提权。把安装命令直接写入初始化脚本即可，示例：

# 更新源并安装ODBC依赖及驱动
apt-get update && apt-get install -y unixodbc unixodbc-dev [你的ODBC驱动包名]

如果需要安装自定义deb包，先将包上传到DBFS，再在初始化脚本中执行：

dpkg -i /dbfs/path/to/your-odbc-driver.deb

注意：不要在notebook的%sh命令里执行安装操作，这里的执行用户是动态spark用户，没有root权限。

方法2：避免使用apt-get，改用替代方案 #

如果apt-get安装仍有问题，可尝试：

• 指定DBFS中的驱动路径：将ODBC驱动文件上传到DBFS，在JDBC/ODBC连接配置中直接引用该路径（比如/dbfs/drivers/odbc/libxxx.so）
• conda安装驱动：如果你的DBR支持conda，可在初始化脚本中用conda安装：

  conda install -y -c conda-forge [odbc-driver-package]
  

为什么提权方法无效 #

动态生成的spark-xxxxxxxx用户是UC集群的临时运行用户，每次集群重启都会生成新的用户ID，修改UID或sudo权限的操作不仅违反UC安全模型，且重启后会完全失效，没有实际意义。

内容的提问来源于stack exchange，提问作者Lucas Mengual