Azure Blob Storage SFTP大文件上传是否保证原子性？

Azure Blob Storage通过SFTP协议上传大于1GB的文件时不保证原子性，连接中断后确实可能留下0字节或部分上传的文件，这和你测试到的行为一致。

具体原因 #

• SFTP客户端在启动大文件上传时，通常会先在Blob容器中创建一个空文件占位；一旦连接中途断开，这个未完成上传的占位文件不会被自动清理，就会以0字节形式留存。
• 对于大于1GB的文件，Azure会自动采用块Blob的分块上传机制，但SFTP协议本身没有强制要求上传完成的原子性，因此部分上传的块不会自动合并或删除，最终可能形成不完整的Blob文件。

应对建议 #

• 上传后校验：上传完成后主动验证文件的大小、哈希值等信息，若不符合预期则删除无效文件。
• 改用SDK实现原子上传：如果需要严格的原子性保障，建议直接使用Azure Blob Storage SDK（如.NET、Python SDK），利用块Blob的事务性提交特性——所有块上传完成后再执行合并操作，未完成则不会生成最终Blob。
• 自动清理无效文件：配置Blob存储的生命周期管理规则，设定自动删除指定时长内的0字节或小体积（如<1KB）Blob，避免无效文件堆积。

内容的提问来源于stack exchange，提问作者Arty