无法通过FluentBit为Loki容器日志添加Kubernetes元数据标签

看起来你是想让FluentBit自动抓取Kubernetes Pod的名称作为标签传到Loki，方便在Grafana里快速关联Pod和日志对吧？我之前也碰到过类似的问题，核心是你的配置里缺了Kubernetes元数据过滤插件的配置——这玩意儿专门用来从K8s API拉取Pod的各种元数据，比如名称、命名空间、标签这些。

我来一步步帮你调整配置：

1. 添加上Kubernetes元数据过滤模块 #

在你的fluent-bit.conf里加入这段过滤配置，它会自动帮你提取Pod的元数据并附加到日志中：

fluent-bit.conf: |
  [SERVICE]
    Daemon              Off
    Flush               180
    Log_Level           info
    Parsers_File        parsers.conf
    Parsers_File        custom_parsers.conf
    HTTP_Server         On
    HTTP_Listen         0.0.0.0
    HTTP_Port           2020

  # 新增：Kubernetes元数据过滤插件
  [FILTER]
    Name                kubernetes
    Match               *
    K8S-Logging.Parser  On
    K8S-Logging.Exclude Off
    Merge_Log           On
    Merge_Log_Key       log_processed
    K8S-Node-Name       ${NODE_NAME}
    Labels              On
    Annotations         On

这里的关键参数：

• Merge_Log On：会把原始日志和提取到的元数据合并在一起，方便后续查看
• Labels/Annotations On：同时提取Pod的标签和注解信息，如果你不需要可以设为Off
• ${NODE_NAME}：是K8s节点的环境变量，用来让FluentBit定位当前节点的Pod

2. 确保输入插件正确关联（如果用tail读取容器日志） #

如果你是用tail插件读取容器日志，要确保输入的Tag能被上面的过滤插件匹配到，比如：

[INPUT]
    Name tail
    Path /var/log/containers/*.log
    Parser docker_x
    Tag kube.*
    Mem_Buf_Limit 5MB
    Skip_Long_Lines On

这里的Tag kube.*可以和过滤插件的Match *匹配，或者你也可以把过滤插件的Match改成kube.*更精准。

3. 输出到Loki时带上Pod名称标签 #

最后在输出到Loki的配置里，把Pod名称作为标签指定进去，这样日志传到Loki后就会带上这个标签：

[OUTPUT]
    Name loki
    Match *
    Host loki-service.monitoring.svc.cluster.local
    Port 3100
    Labels {job="fluent-bit", pod_name="$kubernetes['pod_name']", namespace="$kubernetes['namespace_name']"}
    LabelKeys log_processed
    BatchWait 10
    BatchSize 1048576

重点看Labels里的pod_name="$kubernetes['pod_name']"，这里直接引用了过滤插件提取到的Pod名称元数据，同时我也加了命名空间标签，这样筛选起来更方便。

额外注意事项 #

• 要确保FluentBit的Pod有足够权限访问K8s API，你需要给它绑定一个带有view权限的ClusterRole，不然它拉取不到Pod的元数据
• 你的自定义解析器docker_x看起来没问题，能正确解析Docker格式的日志时间和内容，保持这个配置就好

把这些配置更新到你的ConfigMap里，重新部署FluentBit后，去Grafana里查Loki日志，应该就能看到每个日志条目都带有pod_name标签了，这样筛选特定Pod的日志就轻松多啦！

备注：内容来源于stack exchange，提问作者Balint Laszlo