Azure Data Factory Delete Activity无法删除文件夹问题求助

问题描述 #

• ADF服务主体已配置Storage Blob Data Contributor权限，具备写入/删除权限
• 严格按照官方指南配置Delete Activity：未指定文件名、Recursive设为true，但仅删除文件夹内的文件，文件夹本身未被清理
• 对空文件夹执行Delete Activity时，首次执行提示成功删除1个文件，但存储资源管理器中空文件夹仍存在；再次运行时提示找不到Blob

管道配置代码 #

{
    "name": "pipeline1_delete",
    "properties": {
        "activities": [
            {
                "name": "Delete1",
                "type": "Delete",
                "dependsOn": [],
                "policy": {
                    "timeout": "0.12:00:00",
                    "retry": 0,
                    "retryIntervalInSeconds": 30,
                    "secureOutput": false,
                    "secureInput": false
                },
                "userProperties": [],
                "typeProperties": {
                    "dataset": {
                        "referenceName": "DS_BinaryDeleteFolder",
                        "type": "DatasetReference"
                    },
                    "enableLogging": false,
                    "storeSettings": {
                        "type": "AzureBlobStorageReadSettings",
                        "recursive": true,
                        "enablePartitionDiscovery": false
                    }
                }
            }
        ],
        "annotations": []
    }
}

解决建议 #

1. 明确Blob存储虚拟文件夹的本质 #

Azure Blob存储中没有物理文件夹，所谓的“文件夹”是基于Blob名称的虚拟层级（例如test-folder/blob.txt）。如果是手动创建的空文件夹，会生成一个0字节的占位符Blob（名称以/结尾，比如test-folder/），Delete Activity默认不会识别并删除这类占位符。

2. 调整Delete Activity配置以删除占位符 #

• 在数据集DS_BinaryDeleteFolder中，确保路径指向目标文件夹（例如container-name/target-folder/）
• 修改Delete Activity的storeSettings，添加通配符和过滤规则匹配占位符Blob：

  "storeSettings": {
      "type": "AzureBlobStorageReadSettings",
      "recursive": true,
      "enablePartitionDiscovery": false,
      "wildcardFileName": "*",
      "filter": {
          "type": "BlobNameFilter",
          "prefix": "target-folder/",
          "suffix": "/"
      }
  }
  

  此配置会同时匹配文件夹内的文件和占位符Blob，实现彻底清理。

3. 补充外部操作（若上述配置无效） #

如果Delete Activity仍无法清理占位符，可以调用Azure Function或Logic Apps执行自定义删除逻辑：

• 编写简单的Azure Function，使用Azure Storage SDK遍历目标路径下的所有Blob（包括占位符）并删除
• 在ADF管道中添加Azure Function Activity，调用该函数完成清理

4. 验证权限与日志 #

• 手动尝试删除目标文件夹的占位符Blob，确认权限是否正常
• 查看ADF管道运行的详细日志，检查Delete Activity实际匹配到的Blob列表，确认是否包含占位符

内容的提问来源于stack exchange，提问作者Jen