如何基于AWS CloudWatch中SQS积压量实现EC2实例自动扩缩容？

前提条件 #

• 已创建EC2 Auto Scaling组（ASG）
• 目标SQS队列已存在
• ASG关联的IAM角色具备CloudWatch指标读取、ASG扩缩容、SQS队列访问的必要权限

步骤1：创建自定义CloudWatch指标（计算单实例积压消息数） #

AWS默认无直接的「每实例积压消息数」指标，需通过CloudWatch数学表达式生成：

1. 打开CloudWatch控制台，进入「指标」→「数学表达式」
2. 选择两个基础指标：
   • SQS队列的ApproximateNumberOfMessagesVisible（队列可见消息数，即当前积压量）
   • EC2 Auto Scaling组的GroupInServiceInstances（处于服务状态的实例数量）
3. 输入计算表达式：DIVIDE(m1, m2)（m1对应SQS积压量指标，m2对应ASG实例数指标）
4. 为自定义指标命名（如SQSBacklogPerInstance），并保存到自定义命名空间

步骤2：配置Auto Scaling扩缩容规则 #

1. 进入EC2控制台的「Auto Scaling组」页面，选中目标ASG
2. 切换到「自动扩缩容」标签，点击「添加扩缩容策略」
3. 扩容规则配置：
   • 触发条件：当自定义指标SQSBacklogPerInstance > 5（你的单实例积压阈值）时触发
   • 执行操作：按需设置每次扩容的实例数（比如每次新增2个），冷却时间建议设为5-10分钟（匹配实例启动初始化耗时）
4. 缩容规则配置：
   • 触发条件：当自定义指标SQSBacklogPerInstance < 2（建议设为阈值的40%，避免频繁缩容）时触发
   • 执行操作：按需设置每次缩容的实例数（比如每次移除1个），冷却时间建议设为10-15分钟

步骤3：补充IAM权限配置 #

确保ASG使用的IAM角色包含以下权限（可通过IAM策略编辑器添加）：

{
    "Version": "2012-10-17",
    "Statement": [
        {
            "Effect": "Allow",
            "Action": [
                "cloudwatch:GetMetricStatistics",
                "autoscaling:DescribeAutoScalingGroups",
                "autoscaling:SetDesiredCapacity",
                "sqs:GetQueueAttributes"
            ],
            "Resource": "*"
        }
    ]
}

关键注意事项 #

• 冷却时间需匹配实例启动、应用初始化的耗时，避免实例未就绪就重复触发扩容
• 缩容前建议添加ASG生命周期钩子，确保实例上的任务执行完成后再终止，避免任务丢失
• 测试阶段可手动向SQS发送大量消息验证扩容逻辑，清空队列后验证缩容逻辑是否正常触发

内容的提问来源于stack exchange，提问作者StackOverFlowUser923452