Prometheus target节点重启后历史指标无法在表格视图展示求助

核心现象说明 #

你遇到的表格视图不展示历史指标、图表视图可正常展示的差异，属于两类视图的默认查询逻辑不同，并非历史数据丢失：

Prometheus表格视图默认仅返回查询执行时刻处于活跃状态（最近一个采集周期内上报过）的时间序列，图表视图会拉取所选时间范围内所有匹配的时间序列，无论当前是否活跃。

具体问题排查项 #

• 首先修正采集配置端口不匹配问题：你描述中服务在3000端口暴露指标，但prometheus.yml中配置的target端口为8080，配置不一致会导致采集失败、序列无新数据上报被判定为非活跃，修改配置后重启Prometheus验证。
• Counter类型指标进程内存储特性：Golang Prometheus客户端的Counter类指标默认存储在进程内存中，服务重启后计数器会归零，新上报的序列和重启前的序列如果标签完全一致，会被识别为同序列的数值重置，若查询原始指标值http_requests_total，当前时刻返回的是重启后的归零值，看不到重启前的历史累计值。
• 查看历史指标的正确查询方式：如果需要统计跨重启的请求量，不要直接查询原始Counter值，使用increase(http_requests_total[1h])或rate(http_requests_total[1m])类增量计算函数，这类函数会自动识别Counter重置拐点，正确计算时间范围内的增量，不受服务重启影响。如果要在表格视图查看重启前的历史序列值，可以使用offset指令指定回溯时间，比如http_requests_total offset 2h即可查询2小时前的序列值。

优化建议 #

• 如果需要跨重启保留累计计数值，可以将指标持久化到Redis等进程外存储，服务启动时从持久化存储加载历史值初始化Counter。
• 给target配置唯一标识标签，方便区分不同实例/不同重启批次生成的时间序列，避免序列混淆。

内容的提问来源于stack exchange，提问作者rchangerChaser