Amazon Bedrock微调作业无法解析S3文件的调试咨询

1. 启用微调专属日志配置 #

Bedrock的模型调用日志与微调作业日志是独立配置的，需单独开启微调日志：

• 进入Bedrock控制台，切换至监控标签页
• 找到微调作业日志配置项，启用日志并指定CloudWatch日志组
• 重新启动微调作业，失败后查看该日志组的输出，会包含更具体的解析错误细节（比如哪一行数据格式异常）

2. 深度校验训练数据格式 #

尽管数据在OpenAI可正常运行，但Bedrock对prompt/completion格式有更严格的隐性要求：

• 批量验证JSONL语法正确性：本地执行jq命令检测所有行：

  cat your-data.jsonl | jq -c '.' > /dev/null
  

  任何语法错误（如引号不闭合、逗号缺失、特殊字符未转义）都会被识别
• 确保字段名严格为小写的prompt和completion（大小写敏感，不能出现Prompt这类变体）
• 检查是否存在空行或空白行，Bedrock会将空行判定为无效数据
• 验证prompt和completion字段必须为字符串类型，不能是数字、布尔值或null
• 排查是否包含Unicode控制字符、未转义的双引号等特殊字符，可通过工具批量清理

3. 验证S3对象及路径合规性 #

• 确认S3路径仅使用小写字母、数字和连字符，避免空格、中文或特殊符号
• 若S3对象启用了KMS服务端加密，需确保IAM角色拥有KMS的Decrypt权限
• 直接从S3控制台下载JSONL文件，对比本地文件与原始文件的一致性，排除传输损坏问题

4. 通过AWS CLI发起测试作业 #

使用CLI提交微调作业，可获取更详细的错误输出：

aws bedrock create-fine-tuning-job \
  --model-identifier "amazon.titan-text-lite-v1" \ # 替换为你的Nova Micro模型标识符
  --training-data-config s3Uri="s3://your-bucket/path/to/data.jsonl" \
  --role-arn "arn:aws:iam::123456789012:role/your-bedrock-role" \
  --output-data-config s3Uri="s3://your-bucket/output/"

作业失败后，执行aws bedrock get-fine-tuning-job --job-id <你的作业ID>，查看返回的failureReason字段获取具体错误描述

5. 联系AWS支持获取后台日志 #

若以上步骤无法定位问题，直接联系AWS支持，提供微调作业ID、S3数据路径和IAM角色信息，他们可访问Bedrock后台的详细调试日志，精准定位解析失败原因

内容的提问来源于stack exchange，提问作者Reegz