咨询：Prometheus Web UI中评估时间图表为何显示近2.5小时前而非当前时间

问题描述 #

您好，请问是否有人能解释为何Prometheus Web UI中的evaluation time图表显示的是近两个半小时前的时间，而非当前时间？

可能原因及解决方法 #

• 规则评估进程异常：Prometheus负责处理告警/记录规则的评估进程如果崩溃或卡住，会停止更新evaluation time相关指标，图表就停在最后一次成功评估的时间。可以直接重启Prometheus服务，或者查看服务日志定位报错（比如用journalctl -u prometheus命令查看系统服务日志）。
• 规则配置有误：新增或修改规则时出现语法错误、逻辑冲突，会导致评估进程终止，不再生成新的评估时间数据。用promtool check rules /path/to/your/rules/*.yaml命令检查规则文件的语法合法性。
• 时间同步偏差：Prometheus服务器的系统时间与实际时间偏差过大，或者访问Web UI的客户端时间不对，都会造成图表显示时间异常。先执行date命令检查服务器时间，再核对本地客户端的系统时间。
• 内置指标采集中断：evaluation time对应的内置指标是prometheus_rule_evaluation_duration_seconds，如果Prometheus自身的指标采集被禁用或出现故障，会导致没有新数据生成。可以在Prometheus表达式浏览器中直接查询该指标，确认是否有最新数据点。
• 存储层故障：Prometheus的TSDB存储磁盘满、IO异常或数据损坏，会导致新指标无法写入，图表停留在最后一次成功写入的时间。用df -h检查磁盘空间，查看TSDB相关日志排查存储问题。

内容的提问来源于stack exchange，提问作者Emad Khavaninzadeh