如何在AWS S3批量操作中设置完整目标路径以复制文件

我完全理解你的困扰——本来想把源前缀下的文件直接复制到目标前缀里，结果却出现了两层前缀叠加的情况（dst-prefix/src-prefix/文件名），这确实不是预期的效果。

问题根源 #

出现这个情况的核心原因是：S3 Batch Operations的S3PutObjectCopy操作默认会把manifest文件里的完整源Key直接追加到你指定的TargetKeyPrefix后面。你的manifest里的Key是src-prefix/file0.txt，加上TargetKeyPrefix的dst-prefix，自然就拼成了dst-prefix/src-prefix/file0.txt。

两种实用解决方案 #

方案一：修改Manifest文件，只保留文件名

最简单的处理方式是调整你的manifest内容，把源Key里的src-prefix/前缀去掉，只保留纯文件名。修改后的manifest内容应该是这样的：

src-bucket,file0.txt
src-bucket,file1.txt
src-bucket,file2.txt

之后再运行你原来的create-job命令，TargetKeyPrefix: dst-prefix就会直接和文件名拼接，最终得到你想要的s3://dst-bucket/dst-prefix/file0.txt这类路径。

方案二：使用ReplaceKeyPrefix参数替换路径前缀

如果不想修改manifest（比如manifest是自动生成的，或者需要批量处理多个不同前缀的文件），可以改用ReplaceKeyPrefix参数来替换源Key里的前缀，而不是单纯追加TargetKeyPrefix。

修改你的create-job命令中的--operation部分，替换成以下内容：

--operation '{
  "S3PutObjectCopy": {
    "TargetResource": "arn:aws:s3:::dst-bucket",
    "ReplaceKeyPrefix": {
      "SourcePrefix": "src-prefix/",
      "DestinationPrefix": "dst-prefix/"
    }
  }
}'

这里的逻辑很清晰：把源Key中以src-prefix/开头的部分，替换成dst-prefix/。比如源Key是src-prefix/file0.txt，替换后就变成dst-prefix/file0.txt，完美匹配你的需求。

⚠️ 小提醒：使用ReplaceKeyPrefix时，记得给SourcePrefix加上结尾的斜杠（/），这样只会替换前缀部分，不会误匹配到文件名里包含src-prefix的情况。另外，这种情况下不需要再指定TargetKeyPrefix参数了。

方案选择总结 #

• 如果manifest可以轻松修改，方案一最直接高效；
• 如果需要保留manifest里的完整源Key，或者要批量处理不同前缀的文件，方案二更灵活通用。

内容来源于stack exchange