如何将Databricks集群默认目录改为DBFS路径以配置环境变量运行Jar文件

Databricks Driver节点的本地默认目录无法直接改为DBFS路径（DBFS是分布式文件系统，和节点本地存储逻辑不同），但可以通过以下方式让Jar正确识别DBFS路径：

方法1：直接使用完整DBFS路径配置环境变量 #

• 放弃依赖默认目录拼接路径，在环境变量里直接写完整的dbfs:/格式路径，比如：CONFIG_PATH=dbfs:/data/configs/app.conf
• 注意：如果Jar原本是用Java本地文件API（如File类）读取路径，需要调整为使用Hadoop Filesystem API访问DBFS——因为DBFS不是本地文件系统，本地API无法直接识别

方法2：将DBFS目录挂载到Driver本地 #

• 在Job的初始化脚本（或集群初始化脚本）中添加挂载命令，把目标DBFS目录挂载到Driver本地路径：

  mkdir -p /databricks/driver/mounted_dbfs
  mount -t fuse dbfs:/your/target/folder /databricks/driver/mounted_dbfs
  

• 之后在环境变量中使用本地挂载路径（如/databricks/driver/mounted_dbfs/config），Jar即可像读取本地文件一样访问DBFS内容

方法3：设置Job逻辑工作目录（限特定Runtime版本） #

• 若使用Databricks Runtime 11.3及以上，可在Job配置的「Advanced options」中设置Working directory为dbfs:/your/work/dir。该设置为逻辑工作目录，部分场景下Jar会自动识别，但如果Jar硬编码读取本地路径，仍需配合前两种方法

关键注意事项 #

• DBFS路径必须以dbfs:/开头，不能省略冒号写成dbfs/
• 确保运行Job的服务账号有对应DBFS路径的读写权限，可通过Databricks UI检查路径权限配置

内容的提问来源于stack exchange，提问作者SV19