使用Langchain+S3加载PDF文件时出现下载失败问题求助

问题描述 #

我正在开发一个项目，使用S3存储PDF文件，并通过Langchain连接加载文件。代码如下：

const loader = new S3Loader({ 
  bucket: process.env.BUCKET, 
  key: filekey, // example: test/e3959622-7fb1-44ab-a506.pdf 
  s3Config: { 
    accessKeyId: process.env.S3_ACCESS_KEY, 
    secretAccessKey: process.env.S3_SECRET_KEY, 
    region: "us-east-1" 
  }, 
  unstructuredAPIURL: "http://localhost:8000/general/v0/general", // confusing 
});

文件上传至S3的过程一切正常，但调用API处理功能时，出现错误：

Failed to download file test/e3959622-7fb1-44ab-a506.pdf from S3 bucket .

原因排查与解决方法 #

• Bucket名称未正确读取：错误信息中“S3 bucket”后为空，说明process.env.BUCKET未获取到有效值。

  • 检查.env文件是否正确配置了BUCKET变量，值需与你的S3桶名称完全一致。
  • 确认代码运行环境（如Node.js）已正确加载环境变量，比如使用dotenv时是否在代码开头执行了require('dotenv').config()。

• IAM权限不足（次要排查）：虽然上传正常，但加载文件的Access Key可能缺少s3:GetObject权限。检查对应IAM策略，确保包含目标桶及文件的读取权限。

• 区域配置不匹配：确认S3桶的实际存储区域是否为us-east-1，若桶在其他区域，需将s3Config.region修改为对应区域值。

内容的提问来源于stack exchange，提问作者Việt Anh