You need to enable JavaScript to run this app. 如何在Amazon S3同一存储桶中批量选择并移动指定文件到其他文件夹
优惠活动
大模型
产品
解决方案
定价
更多

如何在Amazon S3同一存储桶中批量选择并移动指定文件到其他文件夹

Amazon S3同存储桶批量移动指定文件操作方案

你可以根据自己的使用场景选择以下两种方案,均可以快速完成2000个指定文件的批量移动:

方案一:AWS CLI 单行脚本(无需编写代码,最快实现)

S3的mv命令已原生封装「复制到目标路径+删除源文件」的逻辑,同存储桶内移动不会产生额外流量费用。

前置准备

  • 已安装AWS CLI并完成权限配置,凭证具备对应存储桶的读、写、删除权限
  • 待移动文件名清单保存为file_list.txt,每行仅存储1个源文件夹下的相对文件名

执行命令

将下方命令中的参数替换为你实际的存储桶、路径配置后即可执行:

# 通用版本,适配无特殊字符的文件名
source_prefix="s3://你的存储桶名/源文件夹/"
dest_prefix="s3://你的存储桶名/目标文件夹/"
while read filename; do aws s3 mv "${source_prefix}${filename}" "${dest_prefix}${filename}"; done < file_list.txt

如果文件名包含空格、特殊符号,使用以下兼容版本:

source_prefix="s3://你的存储桶名/源文件夹/"
dest_prefix="s3://你的存储桶名/目标文件夹/"
while IFS= read -r filename; do aws s3 mv "${source_prefix}${filename}" "${dest_prefix}${filename}"; done < file_list.txt

如果担心误操作,可以先将命令中的mv替换为cp先验证复制结果,确认无误后再执行移动操作。

方案二:Python Boto3脚本(支持错误处理、自定义逻辑扩展)

适合需要添加异常校验、批量统计等定制需求的场景。

前置准备

  • 已安装依赖:pip install boto3
  • 已完成AWS凭证配置

执行脚本

import boto3

# 替换为你自己的配置参数
BUCKET_NAME = "你的存储桶名称"
SOURCE_FOLDER = "源文件夹前缀/" # 末尾保留斜杠
DEST_FOLDER = "目标文件夹前缀/" # 末尾保留斜杠
FILE_LIST_PATH = "./file_list.txt" # 文件名清单的本地路径

s3 = boto3.resource("s3")
bucket = s3.Bucket(BUCKET_NAME)

# 读取文件名清单
with open(FILE_LIST_PATH, "r", encoding="utf-8") as f:
    file_list = [line.strip() for line in f if line.strip()]

success_num = 0
fail_records = []

for file_name in file_list:
    source_key = f"{SOURCE_FOLDER}{file_name}"
    dest_key = f"{DEST_FOLDER}{file_name}"
    try:
        # 复制文件到目标路径
        bucket.copy({"Bucket": BUCKET_NAME, "Key": source_key}, dest_key)
        # 删除源文件
        s3.Object(BUCKET_NAME, source_key).delete()
        success_num += 1
    except Exception as e:
        fail_records.append((file_name, str(e)))

# 输出结果
print(f"处理完成:共成功移动 {success_num} 个文件")
if fail_records:
    print(f"共 {len(fail_records)} 个文件移动失败,明细如下:")
    for name, err in fail_records:
        print(f"{name}: {err}")
注意事项
  • 两种方案本质都是先复制后删除源文件,同存储桶内操作不会产生公网流量费用
  • 操作前建议先选取1-2个文件测试路径配置正确,避免批量误操作
  • 如果需要保留源文件,仅需将CLI命令的mv改为cp,或删除Python脚本中的删除源文件逻辑即可

内容的提问来源于stack exchange,提问作者Still

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.10.17 11:45:07