如何结合Promtail的K8s服务发现与静态配置采集容器内指定日志文件？

当然可以实现，不需要Sidecar或者PV共享日志，核心思路是用Promtail DaemonSet结合Kubernetes服务发现，通过节点上的kubelet目录直接访问容器内的日志文件，具体配置和步骤如下：

核心配置思路 #

1. 以DaemonSet方式部署Promtail，每个节点运行一个实例
2. 通过kubernetes_sd_configs发现目标命名空间内的Pod
3. 利用K8s服务发现提供的元数据（Pod UID、容器名、容器ID等），拼接出容器内日志文件在节点上的实际路径
4. 让Promtail采集该路径下的文件

具体配置示例 #

Promtail配置文件（scrape_configs部分） #

scrape_configs:
- job_name: 'pod-specific-error-logs'
  # 启用Pod类型的服务发现，仅监听你的目标命名空间
  kubernetes_sd_configs:
  - role: pod
    namespaces:
      names: ["your-target-namespace"]
  relabel_configs:
    # 筛选需要采集的Pod（通过标签匹配）
    - source_labels: [__meta_kubernetes_pod_label_app]
      regex: your-app-label
      action: keep
    # 筛选Pod内的目标容器（如果Pod有多个容器）
    - source_labels: [__meta_kubernetes_pod_container_name]
      regex: your-target-container
      action: keep
    # 拼接节点上的日志文件路径（适配Docker容器运行时）
    - source_labels: [__meta_kubernetes_pod_uid, __meta_kubernetes_pod_container_name, __meta_kubernetes_pod_container_id]
      regex: (.+);(.+);docker://(.+)
      replacement: /var/lib/kubelet/pods/$1/containers/$2/$3/rootfs/var/log/apps/error.log
      target_label: __path__
    # 添加自定义标签，方便在Grafana中筛选
    - source_labels: [__meta_kubernetes_pod_name]
      target_label: pod_name
    - source_labels: [__meta_kubernetes_namespace]
      target_label: namespace
    - target_label: log_type
      replacement: app_error

Promtail DaemonSet权限配置 #

需要确保Promtail容器能访问节点上的/var/lib/kubelet/pods目录，在DaemonSet的YAML中添加以下挂载配置：

spec:
  template:
    spec:
      volumes:
      - name: kubelet-pods
        hostPath:
          path: /var/lib/kubelet/pods
          type: Directory
      containers:
      - name: promtail
        # 其他配置（镜像、资源限制等）
        volumeMounts:
        - name: kubelet-pods
          mountPath: /var/lib/kubelet/pods
          readOnly: true

注意事项 #

• 容器运行时适配：如果集群用containerd而非Docker，容器ID前缀是containerd://，需要把regex规则改成(.+);(.+);containerd://(.+)，路径拼接逻辑不变。
• 路径验证：可以先在节点上手动找到目标Pod的日志文件路径，确认格式后再调整配置中的replacement字段。
• 权限控制：确保Promtail的ServiceAccount有获取Pod元数据的权限（默认Promtail ServiceAccount一般已包含所需权限）。
• 精准筛选：通过relabel_configs的keep动作可以精准控制采集范围，避免不必要的资源消耗。

内容的提问来源于stack exchange，提问作者Stephen Dunne