如何基于S3存储桶中的JAR包运行AWS Batch任务？

场景背景 #

需使用其他团队存储在S3存储桶中的JAR文件运行AWS Batch任务，计划让AWS Batch生成EC2实例，从S3复制JAR包后执行带指定参数的java -jar命令，过程中遇到两个问题：

问题1：Amazon Linux镜像无AWS CLI #

使用aws s3 cp命令复制文件时触发报错：

CannotStartContainerError: Error response from daemon: failed to create shim task: OCI runtime create failed: runc create failed: unable to start container process: exec: "aws": executable file not found in $PATH: unknown

问题2：wget命令无法串联后续执行命令 #

尝试用wget下载JAR后执行java -jar，例如wget && java -jar executable.jar的写法报错，wget会将&&或java当作主机地址解析：

• 未用分隔符时：wget: unable to resolve host address java
• 使用&&时：wget: unable to resolve host address ‘&&’

针对问题1：获取S3文件的两种可行方式 #

方式一：更换/安装AWS CLI #

• 直接使用预安装AWS CLI的基础镜像，比如amazonlinux:2、amazonlinux:latest，这类版本通常已内置AWS CLI；也可以搭配amazon/aws-cli镜像（需额外安装Java环境以运行JAR）。
• 若坚持使用默认amazonlinux镜像，可在任务命令中先安装AWS CLI再执行复制：

  yum install -y aws-cli && aws s3 cp s3://你的存储桶路径/目标文件.jar ./ && java -jar 目标文件.jar [你的参数]
  

方式二：通过IAM角色授权S3访问 #

给AWS Batch的EC2实例配置包含s3:GetObject权限的IAM角色，无需CLI即可直接用wget访问S3对象的HTTP地址（实例角色会自动处理身份认证）：

wget https://你的存储桶.s3.区域.amazonaws.com/目标文件.jar && java -jar 目标文件.jar [你的参数]

针对问题2：正确串联bash命令 #

AWS Batch任务定义中，默认不会解析bash语法（如&&），需显式调用bash来执行命令串，具体写法如下：

写法一：直接调用bash执行命令脚本 #

/bin/bash -c "wget https://你的存储桶.s3.区域.amazonaws.com/目标文件.jar && java -jar 目标文件.jar [你的参数]"

写法二：数组形式的任务命令 #

["/bin/bash", "-c", "wget https://你的存储桶.s3.区域.amazonaws.com/目标文件.jar && java -jar 目标文件.jar [你的参数]"]

更灵活的替代方案 #

将执行逻辑写成shell脚本上传至S3，任务中下载脚本并执行：

wget https://你的存储桶.s3.区域.amazonaws.com/run_task.sh && chmod +x run_task.sh && ./run_task.sh

内容的提问来源于stack exchange，提问作者Kunal Pardeshi