如何从自定义host指标的host标签提取主机名作为node-exporter实例标签?
解决方案:提取host指标的host标签作为全局hostname标签
我来帮你搞定这个问题!你现在的需求是把node-exporter自定义的host指标里的host标签值,作为所有来自该实例的指标的hostname标签对吧?之前配置没生效大概率是用错了relabel的层级,或者没搞清楚Prometheus处理标签的顺序。给你两个靠谱的解决方案,看你偏好哪种:
方法一:直接让node-exporter自带hostname标签(推荐,更高效)
这个方法不需要在Prometheus里做复杂配置,直接让node-exporter在启动时给所有指标打上hostname标签,一步到位。
- 准备一个web配置文件
web.yml,内容如下:
global: external_labels: hostname: "${HOSTNAME}"
这里的${HOSTNAME}会自动读取容器所在主机的环境变量值,正好对应你要的主机名。
- 在启动node-exporter容器时,挂载这个文件并指定配置参数:
docker run -d \ -v /path/to/your/web.yml:/etc/node-exporter/web.yml \ -e HOSTNAME=$(hostname) \ quay.io/prometheus/node-exporter:latest \ --web.config=/etc/node-exporter/web.yml
这样所有从这个node-exporter实例采集的指标,都会自动带上hostname=<你的主机名>的标签,完全不用在Prometheus里折腾。
方法二:在Prometheus中通过规则关联标签
如果你不想修改node-exporter的启动配置,可以用Prometheus的记录规则(recording rules)来实现,原理是把host指标的host标签关联到所有同实例的指标上。
- 在Prometheus配置文件中添加记录规则引用:
rule_files: - "node_hostname_rules.yml" # 也可以直接把规则写在配置文件内
- 创建
node_hostname_rules.yml文件(或直接将规则写入Prometheus配置):
groups: - name: add_hostname_to_node_exporter rules: # 为所有node-exporter的指标添加hostname标签,值来自host指标的host标签 - record: '{{ $labels.__name__ }}' expr: | label_replace( {job="node-exporter"} * on(instance) group_left(host) host, "hostname", "$1", "host", "(.*)" ) # 可选:如果你不需要保留原始的host指标,可以添加这条规则删除它 - record: host expr: host action: delete
这个规则的逻辑是:
- 用
on(instance) group_left(host)把同实例的host指标和其他指标关联起来,继承host标签 - 用
label_replace把host标签的值复制到新的hostname标签里 - 最后可以选择删除原始的
host指标,避免冗余
为什么之前的relabel配置没生效?
你之前尝试的relabel_configs是用来处理采集目标的标签(比如instance、job这些),而不是处理指标本身的标签。如果要修改指标的标签,需要用metric_relabel_configs,但metric_relabel_configs只能针对单个指标处理,没法把一个指标的标签传递给同实例的其他指标,这时候就必须用记录规则来做跨指标的标签关联。
内容的提问来源于stack exchange,提问作者Dexxter
相关产品推荐
相关产品推荐

