在ADF中实现Fileshare到Blob图片复制、按工号动态建文件夹及覆盖问题解决

问题根因 #

你遇到的文件覆盖问题，核心是ADF管道的全局变量在ForEach并行执行时会被多个迭代项同时修改，导致最终所有复制任务都读取了最后一次迭代的变量值，全部写到同一个路径下。

解决方案 #

方法1：调整ForEach配置（适配现有流程，改动最小）

1. 打开ForEach活动的设置面板，把「批量计数」的数值改为1，关闭并行执行，让迭代串行逐个运行，避免多个任务同时修改变量。
2. 检查复制活动的目标配置：
   • 目标Blob数据集添加两个参数：工号文件夹、源文件名
   • 数据集的Blob路径设置为 @concat(dataset().工号文件夹, '/', dataset().源文件名)
   • 复制活动中给数据集参数传值：工号文件夹传你设置的文件夹名变量，源文件名传item().name

方法2：移除全局变量，避免冲突（推荐，可保留并行提高效率）

直接在复制活动的目标配置中写动态表达式提取工号，不需要提前存到变量，就不会出现并行覆盖问题，提取工号的表达式如下：

@split(split(item().name, '.')[0], '-')[2]

表达式逻辑：先按.拆分文件名，取后缀前的文件名部分，再按-拆分，取第三段即为工号。

优化方案（适配100万级文件处理，更高效）

现有Get Metadata活动默认最多返回1000条子项，处理100万张图片会有遗漏，推荐直接用单个复制活动实现全量迁移：

1. 源数据集选择Fileshare的根路径，复制活动源设置中添加通配符过滤：*.jpg、*.jpeg，自动过滤非图片文件
2. 目标Blob数据集路径配置为动态表达式，直接按文件名拆分工号生成路径即可，不需要遍历操作，效率更高。

内容的提问来源于stack exchange，提问作者Joshbg