求助：将本地PNG/JPEG图片完整迁移至S3 Bucket内文件夹

以下是针对PNG/JPEG图片仅上传文件名、内容未完整迁移的常见解决方法：

• 确保二进制模式读取文件
  图片属于二进制文件，若用文本模式读取会导致内容损坏。上传时必须以rb模式打开文件，避免编码转换丢失数据。

• 使用正确的S3上传逻辑
  以Python的boto3 SDK为例，直接调用upload_file方法是最可靠的方式，它会自动处理文件分块和重试：

  import boto3
  import os
  
  # 初始化S3客户端
  s3 = boto3.client('s3')
  BUCKET_NAME = '你的Bucket名称'
  S3_TARGET_FOLDER = '目标文件夹路径/'  # 末尾需加斜杠
  
  # 遍历本地图片目录
  local_image_dir = '/本地图片目录路径'
  for filename in os.listdir(local_image_dir):
      file_full_path = os.path.join(local_image_dir, filename)
      # 过滤PNG/JPEG文件
      if filename.lower().endswith(('.png', '.jpg', '.jpeg')) and os.path.isfile(file_full_path):
          # 构造S3对象键（包含目标文件夹）
          s3_object_key = f"{S3_TARGET_FOLDER}{filename}"
          # 执行上传
          s3.upload_file(file_full_path, BUCKET_NAME, s3_object_key)
  

• 验证上传完整性
  上传后对比本地文件与S3文件的MD5哈希值（非分段上传时，S3的ETag即为文件MD5），确认内容一致：

  import hashlib
  
  def get_local_file_md5(file_path):
      md5_hash = hashlib.md5()
      with open(file_path, 'rb') as f:
          for chunk in iter(lambda: f.read(4096), b''):
              md5_hash.update(chunk)
      return md5_hash.hexdigest()
  
  # 验证单文件
  local_md5 = get_local_file_md5(file_full_path)
  s3_response = s3.get_object(Bucket=BUCKET_NAME, Key=s3_object_key)
  s3_etag = s3_response['ETag'].strip('"')
  if local_md5 == s3_etag:
      print(f"{filename} 上传完整")
  else:
      print(f"{filename} 上传失败，需重新上传")
  

• 排查权限与网络问题

  • 确认AWS凭证拥有s3:PutObject权限，Bucket策略允许写入操作；
  • 大文件上传时，建议启用分段上传（boto3的create_multipart_upload），避免网络中断导致上传失败；
  • 检查本地文件是否损坏，可尝试手动打开图片确认完整性。

内容的提问来源于stack exchange，提问作者anand