如何让CloudFront从根目录提供S3子目录下的robots.txt文件？

听起来你遇到的是典型的CloudFront原点路径配置导致的根路径资源访问问题——因为你的默认行为把所有请求都转发到S3桶的/example子目录，所以当用户（或搜索引擎）请求cdn.example.com/robots.txt时，CloudFront实际上在找S3桶里的/example/robots.txt，而你的文件在桶的根目录，自然找不到。

下面是几种靠谱的解决方案，按推荐程度排序：

方案1：为robots.txt创建单独的CloudFront缓存行为（最推荐） #

这是最直接且无副作用的方法，通过给特定路径设置独立的行为，覆盖默认的原点路径：

• 登录AWS CloudFront控制台，找到你的分发配置
• 切换到「行为」标签页，点击「创建行为」
• 在「路径模式」输入框中填写精确匹配的路径：/robots.txt
• 选择和默认行为相同的S3原点，但修改「原点路径」为空（删除默认的/example）
• 其他配置项（缓存策略、转发设置、HTTP版本等）保持和默认行为一致，确保体验统一
• 保存更改后，等待CloudFront完成部署（通常15-20分钟）

部署完成后，当访问cdn.example.com/robots.txt时，CloudFront会直接向S3桶的根目录请求该文件，而其他请求依然会转发到/example子目录。

方案2：复制robots.txt到子目录（简单但需维护两份） #

如果不想调整CloudFront配置，最快速的临时解决方法是把S3桶根目录的robots.txt复制一份到/example目录下。但缺点是后续修改时需要同时维护两个文件，容易出现不一致，所以只适合临时场景或资源很少的情况。

方案3：使用Lambda@Edge改写请求路径（灵活但需代码） #

如果需要更复杂的路径规则，可以用Lambda@Edge在请求转发到S3前修改路径：

1. 创建一个Lambda函数（选择Node.js运行时），在Viewer Request触发器中添加逻辑：

   exports.handler = (event, context, callback) => {
     const request = event.Records[0].cf.request;
     // 检查请求的是robots.txt
     if (request.uri === '/robots.txt') {
       // 移除默认的/example前缀，直接请求根目录的文件
       request.origin.s3.path = '';
     }
     callback(null, request);
   };
   

2. 将函数部署到CloudFront关联的区域（比如us-east-1），并绑定到你的分发的Viewer Request触发器上
3. 等待部署完成后，请求/robots.txt时会自动调整路径指向S3根目录

不过这个方案比缓存行为更复杂，适合有多个特殊路径需要处理的场景，单是robots.txt的话方案1足够。

注意：无论用哪种方案，都可以通过curl -I cdn.example.com/robots.txt来验证是否返回200状态码，确认文件能正常访问。

内容的提问来源于stack exchange，提问作者bhamrick