Kubernetes环境下无法从Prometheus获取指定Pod的最新自定义业务指标

你用last_over_time(metric1{status="status1"}[$__interval])返回所有Pod结果的原因是：last_over_time会对每个独立的时间序列（每个Pod对应一条时间序列，通常由标签区分）取指定时间范围内的最后一个值，多个Pod自然会返回多个结果。

要只获取Pod1的最新数据，按以下步骤处理：

1. 先确认指标的标签信息 #

执行PromQL查询 metric1{status="status1"}，查看返回结果里的标签，找有没有区分Pod的标识，比如pod、instance（可能对应Pod的IP或名称）或者你自定义的标签。

2. 直接过滤指定Pod的标签 #

如果找到Pod1对应的标签（比如pod="pod1"），修改查询语句：

last_over_time(metric1{status="status1", pod="pod1"}[$__interval])

这样就只会返回Pod1这条时间序列的最新值。

3. 如果没有Pod标识标签，先给指标添加标签 #

如果你的metric1指标没有带Pod的标签，需要修改应用或Job的逻辑：

• 在Kubernetes的Deployment里，给Pod注入自身名称的环境变量：

  env:
    - name: POD_NAME
      valueFrom:
        fieldRef:
          fieldPath: metadata.name
  

• 修改你的API接口，在返回metric1指标时，加上pod="$POD_NAME"的标签（比如用Prometheus客户端库添加标签）。
  这样后续导出的metric1就会带上每个Pod的唯一标识，方便过滤查询。

额外场景：如果不需要指定Pod，只要最新的一条数据 #

如果你的需求是不管哪个Pod，只要取最近一次采集到的最新metric1值，可以用：

sort_desc(last_over_time(metric1{status="status1"}[$__interval]))[1:1]

这个语句会先把所有Pod的最新值按时间倒序排列，然后取第一个（最新的那条）。

内容的提问来源于stack exchange，提问作者Kartik73