Kubernetes查询异常：max_over_time与sum函数取最大值失效

核心问题根源 #

你遇到的max()失效、三元运算符只返回单侧值的问题，90%是时间序列标签未对齐导致的——max_over_time生成的CPU请求、限制两个序列，可能因为标签（比如pod/container）不匹配、部分容器缺失请求/限制配置，导致Prometheus无法将两个序列的对应条目关联，进而无法正确计算最大值。

分步解决方案 #

1. 先验证标签一致性

先分别执行两个基础查询，检查返回结果的标签集合是否完全一致：

# 30天内CPU请求最大值
max_over_time(kube_pod_container_resource_requests_cpu_cores{namespace="你的命名空间"}[30d])
# 30天内CPU限制最大值
max_over_time(kube_pod_container_resource_limits_cpu_cores{namespace="你的命名空间"}[30d])

如果发现某个容器只有请求没有限制（或反过来），需要先补全配置，或者在查询中处理缺失值。

2. 用标签对齐修复max()查询

指定对齐的标签（比如namespace/pod/container），让Prometheus能正确关联两个序列的对应条目：

max(
  max_over_time(kube_pod_container_resource_requests_cpu_cores{namespace="你的命名空间"}[30d]),
  max_over_time(kube_pod_container_resource_limits_cpu_cores{namespace="你的命名空间"}[30d])
) on(namespace, pod, container)

如果有多余标签干扰，用ignoring()忽略无关标签：

max(
  max_over_time(kube_pod_container_resource_requests_cpu_cores{namespace="你的命名空间"}[30d]),
  max_over_time(kube_pod_container_resource_limits_cpu_cores{namespace="你的命名空间"}[30d])
) ignoring(annotation, some-extra-label)

3. 修复三元运算符逻辑

针对部分容器缺失请求/限制的情况，用or补全缺失值（比如缺失限制时用请求值替代），再做比较：

# 定义请求序列
request := max_over_time(kube_pod_container_resource_requests_cpu_cores{namespace="你的命名空间"}[30d])
# 定义限制序列，缺失时复用请求值
limit := max_over_time(kube_pod_container_resource_limits_cpu_cores{namespace="你的命名空间"}[30d]) or request
# 取两者最大值
request > limit ? request : limit

4. 解决30天前CPU使用量sum问题

同样是时间对齐和指标类型问题：

• 如果是查询30天前某个时间点的CPU使用量总和（注意：kube_pod_container_cpu_usage_seconds_total是计数器，需要转成使用率）：

sum(rate(kube_pod_container_cpu_usage_seconds_total{namespace="你的命名空间"}[5m]) offset 30d)

• 如果是查询30天前一整天的CPU使用总量：

sum_over_time(rate(kube_pod_container_cpu_usage_seconds_total{namespace="你的命名空间"}[5m])[1d] offset 30d)

额外排查点 #

• 过滤值为0的条目：如果有容器请求/限制设为0，会干扰判断，可加!= 0条件：

  max_over_time(kube_pod_container_resource_requests_cpu_cores{namespace="你的命名空间", value!="0"}[30d])
  

• 统一标签格式：如果标签存在大小写、多余后缀差异，用label_replace修正：

  label_replace(max_over_time(kube_pod_container_resource_requests_cpu_cores{namespace="你的命名空间"}[30d]), "container", "$1", "container", "(.*)-v[0-9]+")
  

内容的提问来源于stack exchange，提问作者nadavyaf