使用Amazon S3 Java API调用ListObjects时能否用--query过滤非前缀条件旧文件

关于S3查询阶段按创建时间过滤对象的可行性 #

• S3 原生的ListObjects/ListObjectsV2服务端接口本身不支持按对象最后修改时间（即你提到的创建时间，S3没有独立的创建时间字段，首次上传后的最后修改时间等价于创建时间）做服务端过滤，仅支持前缀、分隔符、起始token这类过滤条件，所以无法在不使用前缀过滤的前提下，让服务端直接返回符合时间范围的对象，你当前拿到全量结果后客户端过滤是原生API下的标准实现方案。
• 如果你操作的是文件数量极多的大桶，想要降低遍历成本，可以提前开启S3 Inventory功能，它会定期生成全桶对象的元数据报告（包含最后修改时间），你可以直接对报告做过滤筛选符合要求的对象，比反复调用List接口的成本和效率都要好很多。

关于Java S3 API的--query参数支持情况 #

• AWS S3 Java SDK的ListObject系列接口不支持直接传入类似CLI的--query参数。本质上CLI的--query是CLI工具内置的客户端侧JMESPath过滤能力，不是S3服务端支持的请求参数，CLI会在拿到S3返回的全量结果后，本地执行--query指定的过滤逻辑再返回给用户，和你自己在代码里做过滤没有区别。
• 如果你想要在Java里实现类似CLI--query的效果，可以自行引入JMESPath的Java依赖库，拿到List接口的返回结果后用JMESPath表达式做过滤即可。

内容的提问来源于stack exchange，提问作者Christopher Louis