如何在ADF Copy Data活动中将完整JSON对象写入SQL单元格？

核心解决思路 #

针对你要完整捕获API全量JSON响应、处理超5MB大数据的需求，按以下步骤配置即可：

具体操作步骤 #

1. 配置HTTP数据源，获取完整JSON响应 #

• 创建HTTP数据集时，在连接页的「JSON设置」里，不要填写任何JSON路径，避免ADF自动解析并只提取result这类子节点。
• 在格式设置中，将「文件模式」设为Single document，让ADF把整个API响应识别为单个完整的JSON对象。

2. 调整大响应数据的支持限制 #

• 在Copy Data活动的源选项卡下，打开「高级设置」，将「最大支持的字节数」调整为大于你的API响应大小的值（比如设为10485760即10MB，按需扩容）。
• 若响应体积极大（如超100MB），可先把API响应写入Blob Storage的JSON文件，再从Blob复制到SQL，规避内存限制风险。

3. 配置SQL目标表与映射 #

• SQL目标表的对应列需设为NVARCHAR(MAX)或JSON类型（SQL Server 2016及以上支持JSON类型），确保能容纳大体积JSON内容。
• 在Copy Data活动的映射选项卡中，直接将源的整个JSON对象映射到目标列，无需拆分任何字段。

4. 实现5个API的循环调用 #

• 创建数组变量，存入5个API的URL、参数等信息（比如[{"url":"api1地址"},{"url":"api2地址"}...]）。
• 用For Each活动遍历该数组，循环内部的Copy Data活动通过@item().url动态引用当前循环的API地址，完成批量调用。

注意事项 #

• 若API需认证，确保HTTP数据集的认证方式（Bearer Token、Basic Auth等）配置正确，必要时在循环中动态传递认证信息。
• 测试阶段先用小体积API响应验证流程正确性，再切换到大体积响应测试。

内容的提问来源于stack exchange，提问作者Manam