如何利用REST API查询AWS S3存储桶内最后修改的N个对象？

核心思路 #

S3 REST API没有直接返回“最后修改的N个对象”的端点，需要先获取存储桶内的对象列表，再在本地按LastModified字段排序后筛选出目标对象。

具体实现步骤 #

• 调用ListObjectsV2 API获取对象列表
  发送GET请求到对应存储桶的S3端点，请求格式示例：

  GET /?list-type=2 HTTP/1.1
  Host: <bucket-name>.s3.<region>.amazonaws.com
  Authorization: <AWS SigV4签名>
  

  • 若对象总数超过1000（单次返回上限），需处理分页：用返回结果中的NextContinuationToken作为下一次请求的continuation-token参数，直到响应里的IsTruncated为false。
  • 可通过prefix参数限定查询范围（比如指定某个子目录），减少返回数据量。

• 提取对象信息并排序
  从API响应中提取每个对象的Key（对象路径）和LastModified（ISO 8601格式时间戳）字段，然后按LastModified从最新到最旧的顺序排序。

• 筛选出最后修改的N个对象
  排序完成后，取前N个条目即为所需结果。

关键注意事项 #

• 性能优化：如果存储桶对象量级极大，全量拉取排序效率很低，建议：
  • 用prefix/start-after缩小查询范围
  • 定期将对象的修改元数据同步到数据库（如DynamoDB），后续直接从数据库查询排序结果
• 签名要求：所有S3 REST API请求必须携带有效的AWS SigV4签名，确保Authorization头格式正确
• 时间精度：LastModified精确到毫秒，排序时要保留完整时间戳，避免因精度丢失导致排序错误

内容的提问来源于stack exchange，提问作者Chinmay