Azure Data Flows写入Blob存储生成与新文件夹同名空白文件如何避免

解决方案 #

该空白文件是Azure Data Flow写入Blob存储前预创建的临时占位文件，正常写入完成后会自动删除，出现残留通常和配置、权限有关，可通过以下方案解决：

• 调整Sink输出配置：进入数据流Sink节点的设置页，将文件名选项从默认改为「输出到单个文件」或自定义命名规则，关闭允许临时分片选项，避免数据流预创建文件夹级占位文件。
• 修改存储链接服务配置：打开对应Blob存储的链接服务，在高级配置中勾选跳过创建占位Blob选项，从根源关闭占位文件生成逻辑；如果使用ADLS Gen2存储，确认Data Factory的托管身份已被分配存储Blob数据贡献者权限，避免因权限不足导致占位文件删除失败。
• 添加后置自动清理步骤：如果配置调整后仍偶发残留，可在数据流活动后追加一个Delete Activity，配置过滤规则为匹配目标路径下大小为0的文件，每次任务完成后自动清理无效空白文件，注意配置精准过滤规则避免误删正常输出。

内容的提问来源于stack exchange，提问作者Aiden