Prometheus中jvm_memory_max_bytes的sum与avg结果差异过大是否正常？

首先直接给结论：你看到的avg和sum结果的巨大差异是完全正常的，核心原因是你没注意到jvm_memory_max_bytes这个指标的输出维度——它并不是每个Pod输出一个JVM总内存最大值，而是针对JVM里的每一个内存池（Memory Pool）单独输出一条指标。

接下来具体拆解：

• 每个JVM都会划分多个内存池：比如堆内存里的Eden区、Survivor区、老年代，非堆内存里的元空间（Metaspace）、代码缓存（Code Cache）、压缩类空间等，每个内存池都会生成一条带id标签的jvm_memory_max_bytes时间序列。
• 关于avg(jvm_memory_max_bytes)：这个查询是对所有内存池的max值取算术平均。假设你的两个Pod加起来有25条左右的内存池指标，每条的max大概在400MB上下，平均下来自然就是400MB左右。
• 关于sum(jvm_memory_max_bytes)：这个查询是把所有内存池的max值直接累加。25条×400MB刚好就是10GB，和你看到的结果完全匹配。

如果你想得到符合预期的Pod级别的内存统计，可以调整查询语句：

• 查看每个Pod的总JVM内存最大值：sum by (pod) (jvm_memory_max_bytes)
• 查看所有Pod的总内存max的平均值：avg(sum by (pod) (jvm_memory_max_bytes))
• 查看所有Pod的总内存max的总和：sum(sum by (pod) (jvm_memory_max_bytes))

你也可以直接执行jvm_memory_max_bytes查询，看看返回的所有时间序列的pod和id标签，以及对应的数值，这样就能直观看到每个内存池的max值，彻底搞清楚差异的来源。

内容的提问来源于stack exchange，提问作者Mandroid