EKS集群中Infinispan集群化功能异常求助

核心排查方向与解决步骤 #

1. 检查服务发现配置 #

Infinispan依赖Kubernetes Headless服务实现集群节点发现，先确认基础配置是否正常：

• 查看Headless服务状态：

  kubectl get svc -n qa
  

  需确保存在infinispan-server-headless服务，类型为ClusterIP且CLUSTER-IP为None。
• 验证StatefulSet与Headless服务的关联：

  kubectl describe statefulset infinispan-server -n qa | grep ServiceName
  

  输出需为infinispan-server-headless，否则节点无法通过DNS找到集群成员。

2. 排查Pod间网络连通性 #

EKS的安全组、网络策略或CNI插件可能阻断集群通信：

• 测试节点域名解析与连通性：
  在任意Infinispan Pod中执行：

  kubectl exec -it infinispan-server-0 -n qa -- ping infinispan-server-1.infinispan-server-headless.qa.svc.cluster.local
  

  若无法ping通，需检查CoreDNS状态或EKS集群的DNS配置。
• 测试集群通信端口（默认7800）：

  kubectl exec -it infinispan-server-0 -n qa -- nc -zv infinispan-server-1.infinispan-server-headless.qa.svc.cluster.local 7800
  

  若连接失败，检查节点安全组是否允许Pod CIDR段间的7800、8080、11222端口通信，同时确认qa命名空间无限制Pod通信的网络策略。

3. 调整Helm Chart集群配置 #

确保Chart参数适配EKS环境：

• 自定义values.yaml中明确集群配置：

  cluster:
    enabled: true
    transport:
      type: kubernetes
      kubernetes:
        namespace: qa
        serviceName: infinispan-server-headless
  

• 重新部署应用：

  helm upgrade -n qa infinispan-server ./infinispan-helm-charts -f custom-values.yaml
  

4. 通过日志定位具体错误 #

查看Pod日志获取集群失败的直接原因：

kubectl logs infinispan-server-0 -n qa

重点关注以下关键词：

• joining cluster：集群加入流程的状态信息
• DNS resolution failed：域名解析问题
• connection timed out：网络连通性问题
• transport initialization failed：传输层配置错误

5. EKS环境特殊检查 #

• 若使用Fargate节点，确认Fargate Profile已包含qa命名空间，且网络配置允许Pod跨节点通信。
• 检查CoreDNS组件状态：

  kubectl get pods -n kube-system -l k8s-app=kube-dns
  

  确保所有CoreDNS Pod处于Running状态，无重启或异常日志。

验证集群状态 #

部署调整完成后，通过Infinispan CLI验证集群：

kubectl exec -it infinispan-server-0 -n qa -- ./cli.sh

进入CLI后执行：

cluster status

输出应显示所有节点已成功加入集群。

内容的提问来源于stack exchange，提问作者Jai Bharati