Databricks使用to_excel保存Excel文件报OSError Errno 95错误如何解决?
错误原因
你遇到的OSError: [Errno 95] Operation not supported是Databricks环境下往DBFS FUSE挂载路径(/dbfs开头的路径)写入Excel文件的常见问题:
Pandas的to_excel依赖的Excel写入引擎(如openpyxl)需要对目标文件执行随机读写操作,但DBFS FUSE挂载层仅支持顺序写入操作,不支持随机写入,因此直接调用to_excel往/dbfs路径写文件会触发该报错。
解决方案
两种可直接落地的修复方案如下:
方案1:先写入本地临时目录再同步到DBFS(推荐,适配大文件)
驱动节点的本地磁盘支持随机写入,先将文件写入本地临时路径,再通过dbutils同步到DBFS即可,修改后代码如下:
# 写入驱动节点本地临时路径 local_temp_path = "/tmp/digital_nurture_abovejune.xlsx" filtered_df.to_excel(local_temp_path, index=False) # 同步本地文件到DBFS dbutils.fs.cp(f"file:{local_temp_path}", "dbfs:/digital_nurture_abovejune.xlsx") # 执行原有拷贝到目标output路径的逻辑 dbutils.fs.cp('dbfs:/digital_nurture_abovejune.xlsx', path + 'output')
注意本地路径前需要加file:前缀,标识该路径属于驱动节点本地文件系统。
方案2:内存中转后写入(适合小文件)
如果导出的Excel文件体积较小,可通过字节流在内存中转后直接写入DBFS,无需本地临时文件:
import io # 把Excel写入内存字节流 excel_buffer = io.BytesIO() filtered_df.to_excel(excel_buffer, index=False) excel_buffer.seek(0) # 将字节流写入DBFS路径 with open("/dbfs/digital_nurture_abovejune.xlsx", "wb") as f: f.write(excel_buffer.getvalue())
- 注意该方案会占用驱动节点内存,文件超过1G时不推荐使用。
内容的提问来源于stack exchange,提问作者nikki
相关产品推荐
相关产品推荐

