如何通过Microsoft Graph API向Excel添加超5万条记录及Power Automate批处理导出

一、解决Graph API 4MB大小限制的批处理方案 #

核心思路是将SQL查询结果拆分为多个小批次，每个批次的数据量控制在4MB以内，再分批写入Excel。

1. 拆分SQL查询为分页批次 #

使用SQL的分页语法实现分批查询，确保每次返回的数据大小不触发Graph API的限制：

• SQL Server示例：

SELECT * FROM YourTargetTable
ORDER BY PrimaryKeyColumn -- 必须指定排序字段，保证分页数据的一致性
OFFSET @skipRows ROWS
FETCH NEXT @batchSize ROWS ONLY

• 在Power Automate中初始化两个变量：skipRows（初始值0）、batchSize（根据测试设置，比如1000，需确保单批次数据<4MB）。
• 用Do until循环执行查询，直到返回的结果为空，每次循环后将skipRows增加batchSize。

2. 分批写入Excel文件 #

• 提前创建空Excel文件并设置好表头（可通过Graph API或OneDrive连接器完成）。
• 初始化变量currentRow（初始值2，对应表头下的第一行）。
• 每次获取批次数据后，计算写入范围：比如批次有1000条数据，范围就是A@{currentRow}:E@{currentRow + batchSize - 1}（假设数据有5列）。
• 调用Graph API的PATCH /me/drive/items/{file-id}/workbook/worksheets/{sheet-id}/range(address='{calculated-range}')接口，将批次数据写入对应范围。
• 更新currentRow为currentRow + batchSize，进入下一轮循环。

3. 优化建议 #

• 复用Graph API的Excel会话：每次写入时使用同一个会话ID，减少连接开销。
• 加入错误捕获：在循环中添加“Scope”和“Run after”设置，捕获写入失败的情况，可设置重试逻辑或记录错误日志。

二、使用Graph API添加超50000条记录的方法 #

单条Graph API请求无法写入超大量数据，需结合**批量请求（Batch Requests）**和分页写入：

1. 结合批量请求批量写入 #

Graph API允许将最多20个独立请求打包为一个批量请求，大幅减少HTTP请求次数：

• 将每个大批次（比如50000条）拆分为20个小批次（每个2500条），确保每个小批次的数据大小不超过单请求限制，且整个批量请求的总大小<4MB。
• 构造批量请求的JSON示例：

{
  "requests": [
    {
      "id": "1",
      "method": "PATCH",
      "url": "/me/drive/items/{file-id}/workbook/worksheets/{sheet-id}/range(address='A2:E2501')",
      "body": { "values": [[...], [...]] },
      "headers": { "Content-Type": "application/json" }
    },
    {
      "id": "2",
      "method": "PATCH",
      "url": "/me/drive/items/{file-id}/workbook/worksheets/{sheet-id}/range(address='A2502:E5001')",
      "body": { "values": [[...], [...]] },
      "headers": { "Content-Type": "application/json" }
    },
    // 最多添加到20个请求
  ]
}

• 在Power Automate中使用“HTTP”连接器发送批量请求，注意设置正确的授权头（使用Graph API的令牌）。

2. 跨大批次的循环处理 #

如果总数据量远超50000条，重复执行“分页查询SQL数据→拆分为批量请求小批次→发送批量写入请求”的流程，直到所有数据写入完成。

注意事项 #

• 确保Excel工作表有足够的行数：Excel单工作表最多支持1048576行，提前确认数据量是否在范围内。
• 测试批次大小：实际测试不同行数对应的请求大小，调整batchSize避免触发限制。

内容的提问来源于stack exchange，提问作者Liz