如何在Databricks为指定Notebook/Repo挂载额外Blob Container
在Databricks中为特定Notebook/Repo额外挂载Blob容器(保留全局挂载)
你可以通过会话级临时挂载的方式实现,这种挂载仅对当前Notebook的运行会话有效,不会影响集群的全局Blob容器挂载,完美适配你需要的「特定Repo/Notebook关联独立Blob容器」的场景。
操作步骤
确认全局挂载的Blob容器路径,确保新挂载路径不冲突。比如全局Blob1挂载在
/mnt/blob1,则新Blob2选择/mnt/blob2这类独立路径。在目标Notebook的开头执行挂载命令,根据你的身份验证方式选择对应代码:
- 使用SAS密钥挂载:
dbutils.fs.mount( source = "wasbs://<blob2容器名>@<存储账户名>.blob.core.windows.net/", mount_point = "/mnt/blob2", extra_configs = {"fs.azure.sas.<blob2容器名>.<存储账户名>.blob.core.windows.net": "<你的SAS令牌>"} ) - 使用服务主体(Service Principal)挂载:
dbutils.fs.mount( source = "wasbs://<blob2容器名>@<存储账户名>.blob.core.windows.net/", mount_point = "/mnt/blob2", extra_configs = { "fs.azure.account.auth.type": "OAuth", "fs.azure.account.oauth.provider.type": "org.apache.hadoop.fs.azurebfs.oauth2.ClientCredsTokenProvider", "fs.azure.account.oauth2.client.id": "<服务主体Client ID>", "fs.azure.account.oauth2.client.secret": "<服务主体密钥>", "fs.azure.account.oauth2.client.endpoint": "https://login.microsoftonline.com/<租户ID>/oauth2/token" } )
- 使用SAS密钥挂载:
挂载完成后,直接通过
/mnt/blob2路径访问Blob2中的数据即可,全局的/mnt/blob1路径不受任何影响。
额外优化建议
- 如果Repo下有多个Notebook需要共用Blob2挂载,可以把挂载命令封装成Repo内的公共脚本Notebook,其他Notebook通过
%run ./公共挂载脚本调用,避免重复代码。 - 会话结束或集群重启后,临时挂载会自动消失;如果需要主动清理,可在Notebook末尾执行:
dbutils.fs.unmount("/mnt/blob2")
内容的提问来源于stack exchange,提问作者dawid2312
相关产品推荐
相关产品推荐

