如何在EC2 Spot实例被AWS回收的两分钟通知内替换为按需实例

完全可行，AWS的Spot中断通知机制结合自动化工具可以实现这个需求，以下是具体实现步骤：

1. 配置Spot中断通知 #

当AWS要收回Spot实例时，会提前2分钟发送EC2状态变更通知（类型为spot-instance-termination），你需要为Spot实例配置该通知：

• 创建SNS主题，用于接收中断通知消息。
• 为目标Spot实例添加中断通知，将通知发送到上述SNS主题。可以通过EC2控制台、CLI或API完成：

  aws ec2 create-notification-subscription --topic-arn arn:aws:sns:us-east-1:123456789012:spot-termination --instance-id i-1234567890abcdef0 --notification-type SPOT_INSTANCE_TERMINATION
  

2. 编写自动化处理逻辑（以Lambda为例） #

将SNS主题的消息作为触发源，编写Lambda函数完成按需实例的创建与替换：

• 触发条件：设置Lambda的触发器为SNS主题，接收中断通知消息。
• 核心逻辑步骤：
  • 解析SNS消息中的InstanceID和TerminationTime字段，确认即将被收回的Spot实例。
  • 调用EC2 API获取该Spot实例的详细配置：实例类型、可用区、启动模板/AMI、附加的EBS卷、IAM角色、标签等。
  • 使用相同配置启动新的按需实例：

    import boto3
    ec2 = boto3.client('ec2')
    
    def lambda_handler(event, context):
        # 解析SNS消息
        message = event['Records'][0]['Sns']['Message']
        instance_id = message['InstanceID']
        
        # 获取原实例配置
        response = ec2.describe_instances(InstanceIds=[instance_id])
        instance = response['Reservations'][0]['Instances'][0]
        
        # 启动按需实例
        ec2.run_instances(
            ImageId=instance['ImageId'],
            InstanceType=instance['InstanceType'],
            AvailabilityZone=instance['Placement']['AvailabilityZone'],
            IamInstanceProfile={'Name': instance['IamInstanceProfile']['Name']} if 'IamInstanceProfile' in instance else {},
            TagSpecifications=[instance['TagSpecifications'][0]],
            InstanceMarketOptions={'MarketType': 'on-demand'}
        )
        return {'statusCode': 200, 'body': 'On-demand instance started successfully'}
    

  • （可选）将新实例注册到负载均衡器或服务发现组件，同时移除即将终止的Spot实例。
  • （可选）迁移原实例的EBS卷：先卸载原实例的卷，挂载到新实例（或创建快照后挂载）。

3. 配置IAM权限 #

确保Lambda函数拥有足够的权限执行操作：

• 为Lambda角色添加以下权限（通过IAM策略）：
  • ec2:RunInstances：启动按需实例
  • ec2:DescribeInstances：获取原实例配置
  • ec2:AttachVolume/ec2:DetachVolume（可选）：迁移EBS卷
  • elasticloadbalancing:RegisterTargets（可选）：注册到负载均衡器
  • sns:Publish（可选）：发送操作结果通知

4. 测试与验证 #

使用AWS提供的Spot中断模拟器验证流程：

• 通过EC2控制台或CLI触发模拟中断通知，检查Lambda是否被正确触发，按需实例是否成功创建。
• 验证新实例的配置、服务可用性是否符合预期。

注意事项 #

• 成本管控：按需实例成本远高于Spot实例，建议添加监控告警，避免长期闲置的按需实例产生不必要的费用。
• 服务平滑迁移：如果原实例运行关键服务，建议使用会话持久化、共享存储（如EFS）或容器化部署，确保服务能无缝切换到新实例。
• Auto Scaling组优化：如果使用Auto Scaling组，可以配置混合实例策略，将按需实例作为Spot实例的备用，当Spot实例被收回时，Auto Scaling组自动补充按需实例（需调整组的实例分配策略）。

内容的提问来源于stack exchange，提问作者Rehan CH