AWS Grafana中所有CloudTrail自定义指标显示相同数据问题求助

以下是几个常见的排查方向和解决方法：

• 检查指标过滤器的命名唯一性
  确认CDK部署的11个指标过滤器，每个都配置了唯一的metricName（或结合metricNamespace确保全局唯一）。如果多个过滤器复用了相同的命名空间+指标名，CloudWatch会自动聚合所有匹配事件的计数，导致Grafana中所有指标显示相同数据。
  错误示例（重复metricName）：

  // 两个过滤器使用相同的metricName，导致数据聚合
  const iamFilter = new cloudtrail.LogMetricFilter(this, 'IAMFilter', {
    logGroup: myLogGroup,
    filterPattern: cloudtrail.FilterPattern.allTerms('eventSource', 'iam.amazonaws.com'),
    metricNamespace: 'CloudTrail/Events',
    metricName: 'EventCount',
  });
  
  const loginFilter = new cloudtrail.LogMetricFilter(this, 'LoginFilter', {
    logGroup: myLogGroup,
    filterPattern: cloudtrail.FilterPattern.allTerms('eventName', 'ConsoleLogin'),
    metricNamespace: 'CloudTrail/Events',
    metricName: 'EventCount',
  });
  

  修正方式：给每个指标分配唯一名称，比如IAMEventCount、ConsoleLoginCount。

• 验证Grafana查询配置
  打开Grafana面板的编辑界面，逐个检查每个指标查询的参数：

  • 确认Namespace正确对应CloudWatch中的指标命名空间
  • 确认Metric name是每个过滤器对应的唯一指标名
  • 如果设置了维度，检查维度键值是否匹配对应的事件类型
    很可能是复制查询后未修改Metric name，导致所有查询都指向同一个指标。

• 检查指标维度配置
  如果多个指标过滤器使用了完全相同的维度配置，可能导致CloudWatch无法区分不同指标的数据源。建议在CDK中为每个过滤器添加唯一维度，比如：

  const iamFilter = new cloudtrail.LogMetricFilter(this, 'IAMFilter', {
    logGroup: myLogGroup,
    filterPattern: cloudtrail.FilterPattern.allTerms('eventSource', 'iam.amazonaws.com'),
    metricNamespace: 'CloudTrail/Events',
    metricName: 'IAMEventCount',
    metricDimensions: {
      EventCategory: 'IAM'
    },
  });
  

  这样能确保每个指标的维度唯一，避免数据混淆。

• 排除缓存或延迟问题

  • 点击Grafana面板顶部的刷新按钮，清除可能的查询缓存
  • 调整查询的时间范围，确保覆盖了指标过滤器有数据的时间段（CloudTrail指标通常有1-5分钟的延迟）

内容的提问来源于stack exchange，提问作者Ian