如何按AWS EKS Pod统计NAT网关的数据传输量？

下面是几种可行的方案，根据集群规模和监控需求选择：

方案1：VPC Flow Logs + CloudWatch Insights（AWS环境推荐） #

这是AWS原生的精准追踪方案，利用VPC流量日志定位到NAT网关的流量：

• 确认VPC已启用Flow Logs，且日志发送至CloudWatch Logs，确保日志包含srcaddr、dstaddr、bytes等核心字段（默认配置已覆盖）。
• 从AWS控制台VPC服务的NAT网关详情页，获取NAT网关的私有IP，同时记录EKS集群所在私有子网的CIDR范围。
• 进入CloudWatch Insights页面，选择对应的Flow Log日志组，执行以下查询（替换占位符）：

fields @timestamp, srcaddr, dstaddr, bytes
| filter dstaddr = "替换为NAT网关私有IP" and srcaddr like "替换为私有子网CIDR（如10.0.0.0/16）"
| stats sum(bytes) as total_transmitted_bytes by srcaddr
| sort total_transmitted_bytes desc

• 将查询结果中的srcaddr（Pod私有IP）与具体Pod匹配：执行kubectl get pods -o wide获取所有Pod的IP和名称，完成对应关系映射。

方案2：Prometheus + cAdvisor + 自定义规则（适合已有监控栈的场景） #

若集群已部署Prometheus和cAdvisor，可通过以下方式筛选目标流量：

• cAdvisor默认暴露Pod总出站流量指标container_network_transmit_bytes_total，需通过iptables标记NAT网关方向的流量：
  1. 在集群节点上配置iptables规则：

     iptables -A OUTPUT -d NAT_GATEWAY_PRIVATE_IP -j MARK --set-mark 0x100
     

  2. 配置cAdvisor或node-exporter收集标记后的流量指标。
  3. 在Prometheus中编写聚合查询：

     sum(container_network_transmit_bytes_total{pod!="", mark="0x100"}) by (pod)
     

• 该方法需要额外节点配置，适合有自定义监控需求的场景。

方案3：节点级流量分析（小规模集群临时排查） #

针对小规模集群，可直接在节点上做临时流量追踪：

• 通过kubectl describe pod <pod-name>获取Pod所在节点。
• 登录目标节点，执行以下命令追踪Pod到NAT网关的流量：

  # 获取Pod的PID
  PID=$(kubectl get pod <pod-name> -o jsonpath='{.status.pid}')
  # 进入Pod网络命名空间执行tcpdump
  nsenter -t $PID -n tcpdump dst host NAT_GATEWAY_PRIVATE_IP -w pod-nat-traffic.pcap
  # 用tcptrace分析流量大小
  tcptrace -s pod-nat-traffic.pcap
  

• 此方法仅适合临时排查，不支持长期监控。

内容的提问来源于stack exchange，提问作者Akshay Gopani