Azure Data Factory复制活动：遇Excel空行停止，仅复制空行前数据

由于Copy Activity本身不支持识别空行并终止复制的逻辑，需要通过预处理或组合活动来实现需求，以下是两种可行方案：

方案一：数据流（Data Flow）预处理（推荐） #

通过数据流清洗数据，仅保留第一个空行之前的内容，再同步到SQL Server：

• 新建数据流，添加Excel源数据集，配置好文件路径、工作表等参数。
• 添加Surrogate Key转换，为每一行生成递增的行号（命名为RowNum）。
• 添加Aggregate转换，分组选择All，计算第一个空行的最小行号：MinEmptyRowNum = min(RowNum)，空行判断条件需覆盖所有数据列（如isNull(A) && isNull(B)）。
• 添加Join转换，将原始源数据与聚合结果关联，再用Filter转换筛选出RowNum < MinEmptyRowNum的行；若没有空行，则保留所有数据。
• 添加SQL Server目标数据集，配置映射关系，将过滤后的数据输出到目标表。
• 在管道中用Execute Data Flow活动替代原Copy Activity，执行该数据流完成同步。

方案二：Lookup + Copy Activity（轻量方案） #

适合结构固定的Excel，先定位空行位置，再限制Copy Activity的读取范围：

• 添加Lookup活动，读取Excel数据并获取第一个空行的行号（需确保判断所有列为空）。
• 在Copy Activity的Excel源中，使用动态内容设置读取范围：假设表头在第1行，数据从第2行开始，第一个空行的行号为emptyRowNum，则范围写为concat('A2:B', string(emptyRowNum - 1))（根据实际列名调整）。
• 配置Copy Activity的目标SQL Server映射，执行同步。

注意事项 #

• 空行判断必须覆盖所有数据列，避免误过滤部分列为空但其他列有值的行。
• 数据流方案适配复杂Excel结构和后续清洗需求，Lookup方案更适合简单固定场景。

内容的提问来源于stack exchange，提问作者Being Real