You need to enable JavaScript to run this app. Databricks中使用rioxarray导出栅格文件到DBFS不显示如何解决
优惠活动
大模型
产品
解决方案
定价
更多

Databricks中使用rioxarray导出栅格文件到DBFS不显示如何解决

rioxarray 导出栅格文件到DBFS的正确方案

核心原因

rioxarray 底层依赖GDAL完成栅格写入逻辑,Databricks的/dbfs/路径是FUSE协议挂载的分布式存储映射路径,GDAL写入时的临时文件创建、原子重命名逻辑和FUSE挂载存在兼容问题,会出现代码运行无报错,但实际文件未同步到DBFS分布式存储的情况。

操作步骤

  • 优先写入集群本地临时目录,避免直接操作FUSE挂载路径
import rioxarray

# 读取DBFS中的源NC文件
rds = rioxarray.open_rasterio("/dbfs/FileStore/tables/PLANET_SCOPE_3D.nc", decode_times=False)
# 先导出到集群本地临时路径
local_temp_tif = "/tmp/planet_scope.tif"
rds.isel(time=0).rio.to_raster(local_temp_tif)
  • 通过dbutils将本地临时文件移动到DBFS目标路径
dbutils.fs.mv(f"file:{local_temp_tif}", "dbfs:/FileStore/tables/planet_scope.tif")
  • 验证文件已生成
# 方式1:用dbutils查看
dbutils.fs.ls("dbfs:/FileStore/tables/")

# 方式2:通过FUSE挂载路径查看
import os
print(os.listdir("/dbfs/FileStore/tables/"))

其他注意事项

如果操作后仍看不到文件,先确认源NC文件路径正确、集群有对应读写权限,同时检查集群本地临时目录存储空间是否充足。


内容的提问来源于stack exchange,提问作者kanimbla

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.10.18 07:36:07