如何通过ADF管道的数据流/复制活动将Blob数据导出至SharePoint并设置元数据

一、前提准备 #

• 确保ADF已配置好Blob Storage连接器，连接到存储CSV的目标容器
• 配置SharePoint Online连接器，完成ADF对目标站点的授权，权限需覆盖文档库的编辑及元数据修改权限
• 提前在SharePoint目标文档库中创建好所需的元数据列，比如自定义分类字段、业务属性列等

二、复制活动配置步骤 #

1. 源数据集设置

   • 选择Blob Storage数据集，指定CSV文件所在的容器与路径，格式设置为CSV，根据实际文件配置分隔符、编码、首行是否为标题等参数
   • 若需批量迁移，可设置通配符路径或通过数据集参数实现动态文件选择

2. 目标数据集设置

   • 选择SharePoint Online数据集，类型选文档库，指定目标站点URL与文档库名称
   • 核心配置：在数据集的字段映射中，将CSV内的对应字段（或ADF变量/参数值）绑定到SharePoint文档库的元数据列
     • 举例：CSV中的Department字段对应SharePoint的部门元数据列，直接在映射界面关联两者即可

3. 复制活动核心配置

   • 在复制活动的映射标签页，确认源CSV字段与目标SharePoint的文件内容、元数据列的映射关系
   • 若元数据为固定值或来自ADF变量，可手动添加常量值并绑定到对应元数据列
   • 在复制行为中设置文件冲突处理规则，按需选择追加或覆盖模式

4. 动态元数据处理（可选）

   • 若需将Blob文件的属性（如最后修改时间、源路径）作为元数据，可在复制活动前添加获取元数据活动，提取对应属性后通过参数传递给目标数据集的元数据列
   • 涉及复杂元数据逻辑（如根据CSV内容判断分类）时，可前置查找活动或脚本活动处理数据，生成元数据值后传入复制活动

三、为何优先选择复制活动而非数据流活动？ #

• 复制活动专为文件迁移、批量数据同步场景设计，配置轻便、性能损耗低，完全适配本次迁移加元数据设置的需求
• 数据流活动更擅长复杂数据转换、清洗、聚合操作，若用它实现本需求，需额外占用数据流集群资源，且元数据配置步骤远不如复制活动简洁

四、注意事项 #

• 确认SharePoint连接器权限充足：需具备站点写入权限及文档库元数据列的编辑权限
• 大文件迁移时，可开启复制活动的并行复制功能提升速度
• 测试阶段先迁移单个文件验证元数据映射正确性，再执行批量迁移

内容的提问来源于stack exchange，提问作者madhu