Azure Data Factory复制活动仅复制表结构未复制数据求助

针对你遇到的ADF管道仅同步SQL Server表结构、未写入文本文件数据的问题，可按以下步骤排查：

• 检查文本文件与源数据集配置匹配度

  • 确认源数据集的列分隔符和实际文件一致（比如文件用逗号分隔，就别选制表符或其他）。
  • 务必勾选源数据集的「第一行作为表头」选项，否则ADF会把表头当成数据行，而实际数据因列数不匹配被丢弃。
  • 排查文件内容：如果表头后全是空行，或某行的列数和表头不一致，ADF会跳过这类无效数据。

• 验证For Each循环的参数传递

  • 查看Get Metadata活动的运行输出，确认childItems里正确列出了要处理的文件。
  • For Each循环的迭代项必须设为@activity('Get Metadata').output.childItems，确保每个文件都被遍历到。
  • Copy Activity的源数据集要动态引用当前文件：在源数据集的文件路径中使用@item().name，避免固定读取错误文件。

• 检查SQL Server目标端配置

  • 核对映射规则：自动映射要确保文件表头列名和SQL表列名完全匹配（大小写敏感）；手动映射要确认每一列都正确关联。
  • 排查表约束：比如主键列不允许空，但文件对应列有NULL值，或数据类型不兼容（如文件中updated_at是字符串，SQL表是datetime且格式不匹配），都会导致数据写入失败。
  • 确认写入行为：别选「仅同步结构」模式，要设置为「追加」或「覆盖」。

• 查看运行日志细节

  • 进入Copy Activity的运行详情，查看数据统计：若显示「读取0条记录」，说明源文件没读到数据；若「写入0条记录」，说明数据在转换/写入阶段被过滤。
  • 检查警告信息：即使活动显示成功，也可能存在数据类型转换失败、列不匹配等警告，这些会说明数据未写入的原因。

• 单文件测试排除循环问题

  • 暂时移除For Each循环，直接用Copy Activity测试单个文件的复制。如果单文件能成功写入，再回到循环里排查参数配置问题。

内容的提问来源于stack exchange，提问作者uday13