Azure ADF从ADLS向SQLDB复制JSON数组时部分数据缺失求助

• 检查结构匹配度
  你的JSON属于嵌套/数组型结构，而SQL DB是扁平表。直接复制时ADF只会读取顶层字段，嵌套子数据会被忽略。先确认SQL表是否包含所有需要的字段（包括嵌套结构里的字段）。

• 配置JSON源的分层解析
  进入复制活动的源设置，在JSON格式设置中开启分层解析，指定根路径和路径来提取嵌套数据：

  • 若JSON是外层数组包含带子数组的对象，根路径设为$，路径设为[*].details[*]（根据实际结构调整），以此展开所有子数据行。
  • 也可以用映射数据流替代复制活动：添加源数据集指向ADLS JSON，用“扁平化”转换展开嵌套数组列，再通过接收器数据集映射到SQL表。

• 验证字段映射
  在复制活动的「映射」标签页，确保所有需同步的字段（包括展开后的嵌套字段）都正确映射到SQL表对应列，注意数据类型匹配（如JSON字符串对应SQL varchar，数字对应int/bigint等），自动映射未覆盖的字段手动补充。

• 测试与日志排查
  重新运行任务后检查SQL数据完整性，若仍有问题，查看ADF运行日志，排查字段截断、数据类型不匹配等警告并调整。

内容的提问来源于stack exchange，提问作者akshay maid