Druid与Datadog集成无指标显示问题排查求助

一、Druid配置修正点 #

1. 端口参数类型错误
   你的Druid配置中druid_emitter_statsd_port使用了字符串格式"8125"，但该参数要求为整数类型，需修改为：

   druid_emitter_statsd_port: 8125
   

   字符串格式会导致Druid无法正确解析端口，进而无法发送指标到DogStatsD。

2. StatsD主机地址适配
   若Druid以容器化方式部署（如K8s），127.0.0.1指向容器自身而非Datadog Agent所在的主机：

   • 若Druid与Agent同节点，改为节点主机IP；
   • 若使用K8s DaemonSet部署Agent，可开启Druid容器的hostNetwork: true，让其共享主机网络，此时127.0.0.1可直接访问Agent的DogStatsD；
   • 跨节点部署时，需配置Agent的ClusterIP Service地址，让Druid通过Service访问DogStatsD。

3. 扩展加载确认
   虽然你已确认statsd-emitter加载正常，仍可通过Druid节点日志验证：

   grep "Loaded extension: statsd-emitter" druid-node.log
   

   确保无加载失败的报错信息。

二、Datadog Agent配置调整 #

1. 启用Druid集成（Helm方式）
   手动修改datadog-agent/conf.d/druid.d/conf会被Helm覆盖，需在values.yaml中通过integrations字段配置Druid集成，确保Agent加载该配置：

   datadog:
     integrations:
       druid:
         enabled: true
         init_config:
         instances:
           - url: "http://<druid-router-service-name>:8888"
             # 若Druid开启认证，添加头部信息
             headers:
               Authorization: "Bearer <your-auth-token>"
   

   配置后执行helm upgrade更新Agent部署。

2. DogStatsD状态验证
   进入Agent容器执行以下命令，确认DogStatsD服务状态：

   agent status | grep -A 10 "DogStatsD"
   

   若无返回，查看Agent日志定位DogStatsD启动失败原因：

   grep "DogStatsD" /var/log/datadog/agent.log
   

3. 网络连通性测试
   在Druid容器中发送测试指标到Agent，验证DogStatsD接收能力：

   echo "druid.test.metric:1|c" | nc -u <agent-host-ip> 8125
   

   随后在Datadog平台搜索druid.test.metric，若能收到则说明Agent的DogStatsD正常，问题出在Druid的Emitter配置；若收不到则排查网络策略或Agent端口绑定。

三、其他排查项 #

• 检查Druid日志中statsd/emitter相关报错，确认指标发送是否有异常；
• 验证Datadog Agent的API/APP Key有效性，确保Agent能正常连接Datadog平台；
• 若K8s环境存在NetworkPolicy，需允许Agent访问Druid Router的8888端口，以及Druid容器访问Agent的8125端口。

内容的提问来源于stack exchange，提问作者a.utfull.day