无需AWS凭证将S3公共文件导入Snowflake的方法，s3fs可正常读取原因

可以实现无凭证读取公共S3文件到Snowflake表，核心是通过匿名访问配置完成，两种常用方案如下：

方案1：创建匿名访问的S3外部阶段 #

针对批量读取桶内多个文件的场景，可直接创建无有效凭证的外部阶段：

1. 创建阶段，填入任意占位符作为AWS凭证，Snowflake将自动尝试匿名访问公共桶：

CREATE OR REPLACE STAGE <自定义阶段名>
URL = 's3://test-public/new/solution/'
-- 填入任意非空占位值即可，不需要真实AWS凭证
CREDENTIALS = (AWS_KEY_ID = 'dummy' AWS_SECRET_KEY = 'dummy');

2. 验证阶段访问正常：

LIST @<自定义阶段名>;

执行后能看到file.csv文件即说明配置生效。
3. 加载数据到目标表：

COPY INTO <目标表名>
FROM @<自定义阶段名>/file.csv
FILE_FORMAT = (TYPE = CSV SKIP_HEADER = 1 FIELD_OPTIONALLY_ENCLOSED_BY = '"');

如果使用网页端「Load table」功能，在AWS凭证填写步骤直接在两个可选字段填入任意占位字符即可触发匿名访问。

方案2：直接通过HTTP(S)链接加载（无需创建阶段） #

如果仅需加载单个文件，可直接使用S3文件的公开HTTP链接执行导入，完全不需要配置S3相关凭证：

COPY INTO <目标表名>
FROM 'https://test-public.s3.<桶所在区域>.amazonaws.com/new/solution/file.csv'
FILE_FORMAT = (TYPE = CSV SKIP_HEADER = 1 FIELD_OPTIONALLY_ENCLOSED_BY = '"');

注意事项 #

• 确保S3桶已开启公共读权限，且桶策略没有限制Snowflake所在区域的IP访问
• 若加载失败可先在浏览器访问对应S3文件的HTTP链接，确认文件确实可以匿名访问

内容的提问来源于stack exchange，提问作者Dror