如何在Datadog图表及公式中用零替换无数据?DD Agent离线时显示0
解决Datadog公式无数据替换为零及Agent离线显示0的问题
我之前也碰到过完全一样的问题!折腾了好一阵才捋清楚解决办法,给你分享几个亲测有效的方案:
一、查询层面:让fill(0)真正生效
很多时候fill(0)没起作用,都是因为用法不对,试试这几个正确姿势:
- 给聚合结果直接加fill:如果你原来的查询是
sum(my.metric),改成sum(my.metric).fill(0)——一定要把fill放在聚合函数的后面,这样聚合后出现的空值才会被替换成0。 - 多指标运算先单独fill:要是你用公式做多个指标的运算(比如
metricA - metricB),别直接套公式,先给每个指标单独加fill再运算,比如写成sum(metricA).fill(0) - sum(metricB).fill(0),这样哪怕其中一个指标没数据,也不会让整个结果变成空。 - 用
timeseries强制填充:如果是在时间序列图表里,直接用timeseries(sum(my.metric), fill=0)包裹你的查询,这个函数会强制给所有缺失数据的时间点填上0,比单独的fill更稳妥。
二、Agent离线时让监控显示0
当DD Agent离线,它会停止上报指标,默认就会显示无数据,这时候可以用这两种方法解决:
- 自定义 fallback 指标:给Agent加一个自定义检查,定期上报一个值为0的指标,当Agent在线时,真实指标会覆盖这个fallback值;离线时,这个0就会顶上去。
比如创建一个custom_zero_fallback.py的检查脚本,内容大概是:
然后在Agent的from datadog_checks.base import AgentCheck class ZeroFallbackCheck(AgentCheck): def check(self, instance): # 这里替换成你需要的指标名 self.gauge('app.metric.fallback', 0)conf.d目录下配置对应的yaml文件,让它定时运行,这样就能保证哪怕Agent离线,图表上也能显示0。 - 监控规则层面映射:如果是在告警监控里,可以设置“无数据时”的触发规则,然后在可视化或者告警消息里把无数据状态映射为0,但这种方式只适合告警场景,要在图表上显示0的话,还是自定义指标更靠谱。
三、几个容易踩坑的排查点
- 先确认查询的时间范围是否包含了Agent离线的时间段,有时候时间选短了,会误以为fill没生效;
- 检查指标的tag是否完全匹配,要是Agent上报的指标带了特定tag,查询时没加上,找不到数据的话fill自然也没用。
内容的提问来源于stack exchange,提问作者PhilipGarnero
相关产品推荐
相关产品推荐

