Loki在K8s集群中的配置、运维及相关技术问询

1. 调整Loki日志保留时长，加载更久的日志数据 #

要让Loki能加载更久的日志，核心是调整日志保留周期配置，具体操作如下：

• 编辑loki.yaml，找到schema_config配置块，在对应的索引周期下添加或修改retention_period参数，设置你需要的保留时长（比如7天设为7d，30天设为30d）：

  schema_config:
    configs:
      - from: 2020-10-24
        store: boltdb-shipper
        object_store: filesystem
        schema: v11
        index:
          prefix: index_
          period: 24h
        retention_period: 7d  # 自定义日志保留时长
  

• 如果你使用的是旧版Loki（依赖table_manager组件），还需要额外配置：

  table_manager:
    retention_deletes_enabled: true  # 开启日志删除功能
    retention_period: 7d
  

注意：如果是通过Helm部署的Loki，建议直接修改Helm的values.yaml中loki.retentionPeriod字段，再执行helm upgrade重新部署，避免手动修改loki.yaml后被Helm覆盖。

2. 修改Loki配置后重启Pod生效 #

当你通过K8s仪表盘修改了Loki的ConfigMap（loki.yaml一般挂载自ConfigMap），只需重启Loki的Pod即可加载新配置：

• 用命令行删除Loki Pod，K8s会自动重建并加载更新后的配置：

  kubectl delete pods -n <你的命名空间> -l app=loki
  

• 仅需重启Loki服务的Pod，Promtail等其他组件无需重启（除非你修改了Promtail的配置）。

3. Promtail发现新Pod的时间及配置参数 #

Promtail通过K8s API监听Pod的创建/销毁事件，默认同步间隔为30秒，新Pod创建后，一般几十秒内就能在Grafana中看到日志：

• 核心配置参数是kubernetes_synchronization_period，用于调整Promtail同步K8s资源的间隔，可在Promtail的配置文件中修改：

  scrape_configs:
    - job_name: kubernetes-pods
      kubernetes_sd_configs:
        - role: pod
      kubernetes_synchronization_period: 10s  # 缩短同步间隔至10秒
      # 其他relabel/scrape配置...
  

• 另外，scrape_interval（默认15秒）决定了Promtail采集日志的频率，两者叠加后，最快10-25秒左右就能在Grafana中看到新Pod的日志。

4. 其他主流日志聚合工具 #

根据不同场景，可选的日志聚合工具包括：

• ELK/EFK Stack：ELK（Elasticsearch+Logstash+Kibana）功能全面，全文检索能力强；EFK用Fluentd替代Logstash，更轻量，适合K8s环境，但资源占用较高，维护复杂度中等。
• Graylog：部署和维护相对简单，内置告警、分析功能，适合中小团队快速搭建日志系统。
• Splunk：企业级工具，功能覆盖日志采集、分析、告警全流程，但收费昂贵，适合预算充足的大型企业。
• 云原生日志服务：比如AWS CloudWatch Logs、Google Cloud Logging、Azure Monitor，无需自行维护基础设施，适合纯云环境部署的集群。

内容的提问来源于stack exchange，提问作者user3657795