Azure DevOps发布流水线部署Databricks笔记本：PowerShell代码故障求助

问题分析 #

你的PowerShell代码存在两处核心问题：

• 认证环节使用了交互式命令，无法在Azure DevOps流水线的非交互式环境中运行，且CLI配置语法错误
• workspace import命令的参数传递完全错误，混淆了语言参数与文件路径

修复后的代码 #

# Variables
$workspaceUrl = "https://<databricks-instance>"
$personalAccessToken = "<databricks-personal-access-token>"
$localNotebookPath = "$(System.DefaultWorkingDirectory)/<artifact-path>/notebooks/my_notebook.ipynb"
$targetEnvironment = "UAT"
$remoteNotebookPath = "/$targetEnvironment/notebooks/my_notebook"

# 设置Databricks CLI环境变量（非交互式认证，适合CI/CD）
$env:DATABRICKS_HOST = $workspaceUrl
$env:DATABRICKS_TOKEN = $personalAccessToken

# 验证CLI连接（可选，用于调试）
databricks workspace list /

# 部署笔记本到UAT环境
# 参数说明：
# <本地文件路径> 要上传的笔记本文件
# <远端工作区路径> 目标路径（不需要.ipynb后缀，Databricks会自动处理）
# -l 指定笔记本语言（根据实际情况调整）
# -o 覆盖已存在的笔记本
databricks workspace import "$localNotebookPath" "$remoteNotebookPath" -l python -o

关键修复点 #

• 非交互式认证：用环境变量DATABRICKS_HOST和DATABRICKS_TOKEN替代交互式的databricks configure，避免流水线卡住等待输入
• 修正import参数：
  • 第一个参数是本地笔记本文件的绝对路径（需从Azure DevOps工件库或代码仓库获取，用$(System.DefaultWorkingDirectory)变量定位）
  • 第二个参数是Databricks工作区的目标路径（不需要带.ipynb后缀）
  • -l参数指定笔记本语言（必须是有效值：python、scala、sql、r、markdown）
• 路径规范：目标路径拼接更清晰，避免出现连续斜杠的问题

额外注意事项 #

• 确保Azure DevOps流水线代理已安装Databricks CLI，未安装可提前添加PowerShell步骤执行pip install databricks-cli
• 验证笔记本语言参数与实际文件的语言匹配，否则导入后可能无法正常运行
• 若使用私有代理，需确保能访问Databricks工作区的URL

内容的提问来源于stack exchange，提问作者Swarup Deb