You need to enable JavaScript to run this app.
优惠活动
大模型
产品
解决方案
定价
更多

如何将数据从Databricks写入ADLS(Azure数据湖存储)

问:如何将数据从Databricks写入ADLS?

操作步骤与代码示例:

  1. 验证ADLS路径可访问性:先执行命令确认目标ADLS路径能正常访问
  2. 写入数据:将目标DataFrame(示例中为customer_df)写入指定ADLS路径,指定存储格式为CSV,分隔符为|
  3. 确认写入结果:再次查看ADLS路径,验证数据是否成功写入
// 验证ADLS目标路径
dbutils.fs.ls("abfss://transformed-data@azuredatalakegen2project.dfs.core.windows.net/")

// 将DataFrame合并为1个文件后写入ADLS,格式为CSV,分隔符为|
customer_df.coalesce(1).write.format("csv").option("sep", "|").save("abfss://transformed-data@azuredatalakegen2project.dfs.core.windows.net/customer")

// 再次查看路径,确认数据已写入
dbutils.fs.ls("abfss://transformed-data@azuredatalakegen2project.dfs.core.windows.net/")

注:示例中customer_df为待写入的DataFrame对象,abfss://...为你的ADLS Gen2实际路径,可根据业务场景替换参数。

内容的提问来源于stack exchange,提问作者Akash Satish Magar

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.06.19 08:27:11