Node Lambda调用AWS JS SDK v3 GetObjectCommand读取S3文件是否有次数限制？

架构老林

2026-9-26

问题原因及解决方案

核心原因

你遇到的处理到第51个文件就停止运行的问题，本质是AWS SDK for JavaScript v3的默认HTTP连接池限制+未正确释放S3 GetObject请求的底层连接导致的：

AWS SDK v3的Node.js运行时默认配置的HTTP/HTTPS连接池最大连接数为50，所有S3请求都会复用这个池里的TCP连接
调用GetObjectCommand返回的响应体是可读流类型，如果你没有完整消费流数据（比如只拿了响应头就结束逻辑）、也没有显式销毁流，对应的TCP连接会一直被占用，不会被释放回连接池
当50个连接全部被占满后，第51个S3 GetObject请求会一直等待空闲连接，表现为程序无响应停止运行，和Lambda的内存、超时配置无关

修复方案

显式释放S3 GetObject的连接
每次完成GetObject的业务逻辑后，不管是否需要读取文件内容，都要显式销毁响应流：

// 示例：读取S3文件内容后释放连接
const command = new GetObjectCommand({ Bucket: 'Bucket名称', Key: 'S3文件路径' });
const response = await s3Client.send(command);
// 消费流内容的场景
const fileContent = await response.Body.transformToString();
// 不需要读内容的测试场景直接调用销毁即可
// await response.Body.destroy();

按需调整连接池大小
初始化S3客户端时可以手动调大最大连接数，适配你的并发处理需求：

import { S3Client } from "@aws-sdk/client-s3";
import { NodeHttpHandler } from "@aws-sdk/node-http-handler";
import { Agent as HttpAgent } from "http";
import { Agent as HttpsAgent } from "https";

const s3Client = new S3Client({
  region: "你的AWS区域编码",
  requestHandler: new NodeHttpHandler({
    httpAgent: new HttpAgent({ keepAlive: true, maxSockets: 200 }),
    httpsAgent: new HttpsAgent({ keepAlive: true, maxSockets: 200 })
  })
});