Grafana Webhook集成失败：400 Bad Request错误排查求助

关键排查步骤 #

既然Postman和CURL能正常发送请求到MBUS，说明服务本身无问题，问题集中在Grafana的请求格式、配置细节上，按以下步骤逐一验证：

1. 对比请求内容差异

   • 在MBUS服务端开启请求日志，或用K8s的tcpdump抓取流量，分别对比Postman/CURL和Grafana发送的请求：
     • 检查请求头：比如Content-Type是否一致，Grafana默认是application/json，确认是否和你手动请求的头信息匹配，有没有遗漏认证头（如Authorization）
     • 对比JSON载荷：Grafana默认的Webhook模板结构和你手动发送的可能完全不同，MBUS可能不识别。需要在Grafana联系点的「自定义Payload」里完全复刻Postman中成功的JSON结构，用Grafana变量替换动态字段（比如{{ .Alerts[0].Annotations.summary }}）

2. 验证Grafana Webhook配置

   • 核对URL：确认MBUS的K8s内部服务名、端口是否正确，有没有拼写错误
   • 检查认证信息：如果MBUS需要Token或其他认证，确认Grafana的「HTTP Header」里的键值对格式正确（比如Authorization: Bearer <你的token>），大小写和符号不能错
   • 检查自定义Payload语法：确保JSON格式合法，引号闭合、逗号正确，Grafana模板变量的使用符合语法（{{ 变量名 }}）

3. 深挖Grafana Pod日志

   • 重点搜索webhook、bad request相关日志，日志里通常会打印Grafana发送的请求体，以及MBUS返回的具体错误原因（比如“缺少必填字段xxx”），这是定位问题的关键

4. 测试静态Payload

   • 先在Grafana的自定义Payload里写一个和Postman完全一致的静态JSON（不使用任何变量），测试是否能成功发送。如果成功，再逐步替换成Grafana变量，排查是哪个变量或字段导致的问题

5. 检查K8s网络与权限

   • 确认Grafana所在Namespace的Pod有权限访问MBUS服务，K8s网络策略没有阻止两者之间的流量

内容的提问来源于stack exchange，提问作者user2315104