使用AWS S3 CLI 批量下载指定日期前的版本化文件与目录

该需求完全可通过AWS S3 CLI实现，不存在能力边界问题。核心支撑来自两点：一是CLI原生支持枚举版本控制桶下的全量历史版本元数据，可按路径前缀做目录粒度批量遍历；二是CLI提供了指定版本ID下载的参数能力，可绕过最新版本直接拉取指定时间节点的历史上传内容。

• 启用版本控制的S3桶会留存文件所有历史上传版本的元数据，包括每个版本的最后修改时间、全局唯一版本ID。用CLI的list-object-versions命令指定路径前缀，就能一次性拉取整目录下所有文件的全版本信息，不需要挨个查询单文件。
• 日常用的s3 cp命令默认只拉取文件最新版本，但只要搭配对应版本的VersionId参数调用下载接口，就能精准拿到对应时间节点的历史内容，刚好匹配cat.jpg两次上传、取2020-02-08那版内容的场景要求。
• 要做public_html/uploads这类目录粒度的批量操作，只需要在列版本时把查询前缀设为该路径，就能自动覆盖路径下所有子目录、所有层级的文件，不需要手动拆分目录结构。

单文件历史版本下载 #

1. 先查询目标文件在目标时间窗口对应的版本ID，以查询public_html/uploads/cat.jpg在2020-02-08上传的版本为例，执行命令：
   aws s3api list-object-versions --bucket 你的目标桶名 --prefix public_html/uploads/cat.jpg --query "Versions[?LastModified>='2020-02-08T00:00:00' && LastModified<='2020-02-09T00:00:00'].{VersionId:VersionId,UploadTime:LastModified}"
2. 从返回结果里拿到匹配的VersionId后，执行下载命令：
   aws s3api get-object --bucket 你的目标桶名 --key public_html/uploads/cat.jpg --version-id 上一步查询到的版本ID 本地保存路径/cat.jpg

整目录批量操作（以public_html/uploads路径为例） #

• 先用list-object-versions拉取该前缀下所有版本，搭配JMESPath查询对每个文件的所有版本按修改时间倒序排序，筛选出每个文件不晚于目标下载日期的最近一个版本ID，避免重复下载同一个文件的多个历史版本。
• 可以把CLI的输出格式设为纯文本，将筛选后的文件Key、版本ID转成可直接被Shell循环读取的结构化数据，逐行调用get-object完成批量下载，全程不需要借助第三方工具。
• 批量下载时可以直接把S3上的Key路径映射为本地相对路径，和S3原有的目录结构保持一致，不需要额外手动整理层级。

操作注意：执行CLI操作的IAM身份不能只配置普通对象读取权限，必须同时具备两类权限：一是绑定到桶ARN的s3:ListBucket权限，允许枚举指定前缀下的对象版本；二是绑定到对象ARN的s3:GetObjectVersion权限，缺任意一项都无法正常拉取历史版本内容。

内容的提问来源于stack exchange，提问作者owenmelbz