如何通过PromQL修改Prometheus中已有指标的instance标签值

首先明确：PromQL本身无法直接修改Prometheus已存储的指标标签值，只能通过以下几种方式实现需求：

一、查询时临时重写标签（无需修改存储） #

如果只是需要在查询时得到目标格式的指标，不需要永久改动历史数据，用label_replace函数在PromQL里动态替换即可：

label_replace(rundeck_system_stats_uptime_since{app="rdk-exporter"}, "instance", "rdk-exporter:9620", "instance", ".*")

这个逻辑会匹配所有app="rdk-exporter"的rundeck_system_stats_uptime_since指标，把instance标签的值强制替换为rdk-exporter:9620，不管原来的instance值是什么。

二、通过记录规则生成新指标（长期统一查询逻辑） #

如果需要长期使用带目标标签的指标，建议创建记录规则，生成新的指标来替代旧指标：

1. 在Prometheus的规则配置文件（比如rundeck_rules.yml）中添加以下规则：

groups:
- name: rundeck_label_fix
  rules:
  - record: rundeck_system_stats_uptime_since_fixed
    expr: rundeck_system_stats_uptime_since{app="rdk-exporter"}
    labels:
      instance: "rdk-exporter:9620"

2. 重启Prometheus或者重载配置，规则生效后，Prometheus会定期计算并存储rundeck_system_stats_uptime_since_fixed指标，其instance标签就是你需要的固定值。
3. 后续查询直接使用新指标名即可，旧指标可以根据需求保留或通过配置过期时间自动清理。

三、修改历史原始数据（复杂操作，谨慎执行） #

如果必须修改Prometheus存储的原始历史数据，需要走导出-修改-重新导入的流程：

1. 导出数据：用Prometheus工具将数据导出为文本格式：

promtool tsdb dump /path/to/prometheus/data > rundeck_metrics_dump.txt

2. 批量替换标签值：用脚本或命令批量修改dump文件中的标签，比如用sed：

sed -i 's/rundeck_system_stats_uptime_since{app="rdk-exporter", instance="[^"]*"/rundeck_system_stats_uptime_since{app="rdk-exporter", instance="rdk-exporter:9620"/g' rundeck_metrics_dump.txt

3. 停止Prometheus服务：避免操作过程中数据写入冲突。
4. 清理旧数据：先备份原数据目录，再清空原有数据：

# 先备份
cp -r /path/to/prometheus/data /path/to/prometheus/data_backup
# 清空旧数据
rm -rf /path/to/prometheus/data/*

5. 导入修改后的数据：

promtool tsdb load /path/to/prometheus/data < rundeck_metrics_dump.txt

6. 重启Prometheus：服务启动后，历史数据的instance标签已更新。

注意：数据迁移操作风险较高，务必提前全量备份数据，操作前确保Prometheus完全停止。

内容的提问来源于stack exchange，提问作者ady8531