自动化上传Apache日志至S3 Bucket失败：路径不存在求助

核心问题分析 #

1. 文件名时间戳不匹配：脚本中生成tar文件和执行S3上传时两次独立调用date命令，哪怕间隔几秒，时间戳都会存在差异，导致上传时引用的文件名和实际生成的tar文件名称不匹配，AWS CLI自然找不到对应文件。
2. 命令语法错误：最初的tar命令和S3上传路径中，date命令未用子shell$()包裹，会被当成普通字符串处理，生成错误的文件名/路径，比如会出现abcd-httpd-logs-date这类不符合预期的名称。
3. 移动文件的模糊匹配风险：sudo mv *.tar /tmp/会移动当前目录下所有tar文件，若存在其他无关tar包，可能干扰后续逻辑。

具体修复步骤 #

步骤1：统一时间戳变量 #

在脚本开头定义唯一的时间戳变量，避免多次执行date导致时间不一致：

timestamp=$(date +'%d%m%Y-%H%M%S')
myname="abcd"

步骤2：修正tar打包命令 #

使用统一变量生成正确格式的tar文件名：

sudo tar -cvf "${myname}-httpd-logs-${timestamp}.tar" /var/log/apache2/*.log

步骤3：精准移动目标文件 #

明确指定要移动的tar文件，避免误操作：

sudo mv "${myname}-httpd-logs-${timestamp}.tar" /tmp/

步骤4：修正S3上传命令 #

用统一时间戳变量确保源文件和S3目标路径的文件名一致：

aws s3 cp "/tmp/${myname}-httpd-logs-${timestamp}.tar" "s3://${s3_bucket}/${myname}-httpd-logs-${timestamp}.tar"

额外优化建议 #

• 添加AWS CLI存在性判断，避免每次执行都重复安装：

  if ! command -v aws &> /dev/null; then
      sudo apt install awscli -y
  fi
  

• 若通过cron执行任务，需指定AWS CLI绝对路径（如/usr/bin/aws），因为cron的环境PATH比用户登录时更窄，可能找不到aws命令。

完整修复后的脚本 #

sudo apt update -y
sudo apt install apache2 -y
sudo ufw allow 'Apache'
sudo systemctl start apache2

# 定义统一变量
timestamp=$(date +'%d%m%Y-%H%M%S')
myname="abcd"

# 打包日志
sudo tar -cvf "${myname}-httpd-logs-${timestamp}.tar" /var/log/apache2/*.log
# 移动到/tmp
sudo mv "${myname}-httpd-logs-${timestamp}.tar" /tmp/

# 按需安装AWS CLI
if ! command -v aws &> /dev/null; then
    sudo apt install awscli -y
fi

s3_bucket="s3_test"
# 上传到S3
/usr/bin/aws s3 cp "/tmp/${myname}-httpd-logs-${timestamp}.tar" "s3://${s3_bucket}/${myname}-httpd-logs-${timestamp}.tar"

内容的提问来源于stack exchange，提问作者Anvesh