GCP GKE集群HAProxy Ingress Controller服务IP异常变更问题咨询

你遇到的IP变更问题核心由日志上报的IP_IN_USE_BY_ANOTHER_RESOURCE错误导致：

• 你当前的HAProxy Service没有配置固定静态内网IP，GKE默认会为Internal LoadBalancer分配临时内网IP，复用之前分配的IP作为LB前端地址。
• 你之前使用的IP10.17.129.17被同VPC下的其他资源（如GCE实例、其他内部LB、手动配置的静态IP资源等）占用后，GKE服务控制器连续13天尝试同步原有IP重建LB均失败，最终只能自动分配一个新的可用临时IP，就出现了EXTERNAL-IP字段变更、原有IP流量失效的情况。
• 无感知触发的常见场景：未预留的临时IP被GCP回收后，刚好被同VPC下其他新建的资源抢先占用，或是其他团队/人员在你未感知的情况下创建了使用该IP的资源。

• 强制绑定预留静态内网IP，从根源避免IP被抢占：
  1. 先在GCP VPC对应子网中预留一个未被使用的静态内部IP，确保该IP仅归该LB使用
  2. 修改Service配置，在spec字段新增loadBalancerIP: 你预留的静态IP，同时新增annotation cloud.google.com/load-balancer-ip-addresses: "你预留的静态IP"适配GKE高版本规范
  3. 重新apply Service配置即可完成固定IP绑定，后续GKE将始终使用该预留IP创建LB
• 配置相关事件告警：在GCP监控或K8s事件监控中配置规则，当Service出现SyncLoadBalancerFailed事件、GCP API返回IP_IN_USE_BY_ANOTHER_RESOURCE错误时立刻触发告警，提前处置避免业务中断
• 不要在业务逻辑中硬编码LB IP，将LB IP绑定到内部域名使用，即使出现IP异常变更也仅需修改DNS解析即可恢复，无需逐台调整业务配置
• 不要手动修改GKE自动创建的LB配置，GKE服务控制器会定期同步Service配置覆盖手动修改的内容，反而可能引发配置冲突类异常

内容的提问来源于stack exchange，提问作者kadamb