AWS S3如何实现文件名含中间标识符的对象通配符搜索

首先明确S3原生API的能力边界：S3的ListObjectsV2接口的prefix参数仅支持前缀精确匹配，不支持任意位置的通配符匹配。

注意：S3控制台搜索框里的*通配符是前端对当前加载结果做的本地过滤，不是API原生能力，调用API时在prefix里传*会被识别为普通字符，完全达不到模糊匹配的效果。

如果直接全量遍历百万级对象做过滤，需要调用上千次List接口，耗时长、成本高、容易触发限流，完全不推荐。以下是可落地的可行方案，按推荐优先级排序：

方案1：调整对象Key命名规则（最优，零额外成本） #

如果业务允许调整存量和新增对象的命名规范，直接把你需要检索的固定位置标识符挪到Key的最前端，或者作为虚拟目录前缀：

• 原命名xxx-123-yyy.mp4调整为123-xxx-yyy.mp4
• 或者调整为虚拟路径格式123/xxx-yyy.mp4
  调整后直接传prefix=123-/prefix=123/调用List接口，就能直接走S3内置的索引检索，百万级对象也能毫秒级返回匹配结果，没有任何额外成本。

方案2：使用S3 Inventory做离线检索 #

如果不能调整现有对象命名，且检索场景对实时性要求不高（比如允许T+1的数据延迟），直接开启S3 Inventory功能：

• 配置按天/周生成全桶对象清单，支持导出为CSV、Parquet、ORC格式存到指定存储桶
• 需要检索包含123的对象时，直接用S3 Select或者Athena对清单文件做字符串过滤即可，百万级数据量几秒就能返回结果，不需要反复调用List接口扫桶

方案3：构建独立索引支持实时检索 #

如果需要毫秒级实时检索能力，单独搭建一层对象索引：

• 给S3桶配置事件通知，所有对象上传、删除操作自动触发Lambda函数，解析对象Key提取你需要匹配的标识符段，把「标识符 -> 对应对象Key列表」的映射关系存入DynamoDB或者OpenSearch
• 检索时直接查询索引库即可，不需要访问S3本身，性能不会随对象数增长下降
• 首次上线前跑一次一次性全量任务，把存量百万级对象的索引补全即可正常使用

内容的提问来源于stack exchange，提问作者purplecrow