使用Terraform批量创建Azure Databricks笔记本报错求助

目录结构 #

Advanced_analytics
    - CICD
        - Terraform
            - notebooks.tf
            - output.tf
            - variables.tf
    - notebooks
        - vendor_consolidation
            - import_GW
                - import_gw_notebook.py
            - import_bc
                - import_bc_notebook.py
            - common_code
                - print_data_notebook.py
            - consolidate_notebook.py
            - validate_copy_notebook.py

现有Terraform代码（notebooks.tf） #

resource "databricks_notebook" "print_vendor"{
    for_each = fileset("${path.module}/../../notebooks/vendor_consolidation", "**/*.py")
    path = "/Workspace/live/vendor_consolidation/${each.value}"
    language = "PYTHON"
}

报错信息 #

╷
│ Error: cannot create notebook: open : The system cannot find the file specified.
│ 
│   with databricks_notebook.print_vendor["import_GW/import_gw_notebook.py"],
│   on notebooks.tf line 3, in resource "databricks_notebook" "print_vendor":
│    3: resource "databricks_notebook" "print_vendor"{
│ 
╵

问题原因与解决方法 #

核心问题：缺少content参数 #

你的databricks_notebook资源块未指定content参数——这个参数是Terraform读取本地Python文件内容并上传到Databricks工作区的关键配置，缺少它Terraform无法定位要读取的文件，因此报错“无法找到文件”。

修正后的代码 #

resource "databricks_notebook" "print_vendor"{
    for_each = fileset("${path.module}/../../notebooks/vendor_consolidation", "**/*.py")
    path = "/Workspace/live/vendor_consolidation/${each.value}"
    language = "PYTHON"
    # 添加content参数，读取对应Python文件的内容
    content = file("${path.module}/../../notebooks/vendor_consolidation/${each.value}")
}

额外验证与排查步骤 #

1. 确认路径有效性：可临时添加output配置，检查Terraform生成的文件路径是否正确：

   output "notebook_file_paths" {
     value = [for file_path in fileset("${path.module}/../../notebooks/vendor_consolidation", "**/*.py") : "${path.module}/../../notebooks/vendor_consolidation/${file_path}"]
   }
   

   执行terraform plan后，查看输出的路径是否与本地实际文件路径一致。

2. Azure DevOps流水线检查：

   • 确保流水线已完整检出notebooks/vendor_consolidation目录下的所有文件，可在流水线步骤中添加文件列表命令（如Linux的ls -R $(Build.SourcesDirectory)/Advanced_analytics/notebooks或Windows的dir $(Build.SourcesDirectory)\Advanced_analytics\notebooks /s），验证代理机器上的文件结构是否与本地一致。
   • 注意路径大小写：Linux代理环境严格区分路径大小写，需与本地完全匹配；Windows代理不区分，但上传到Databricks工作区后路径会区分，需保持命名一致性。

内容的提问来源于stack exchange，提问作者Nikhil Ravindran