如何将本地Docker守护进程的GELF格式日志传输到Loki并提取标签
实现方案
你需要对JSON格式的GELF日志做字段解析和标签提取,目前有两种成熟的实现路径:
方案1:直接在Loki Docker Log Driver侧配置解析(最轻量,无需额外组件)
直接调整日志驱动的运行参数,在采集侧完成解析后再发送到Loki:
- 单容器启动时添加如下
log-opt配置即可:
docker run \ --log-driver=loki \ --log-opt loki-url="http://你的Loki地址:3100/loki/api/v1/push" \ --log-opt loki-pipeline-stages=' - json: expressions: # 格式为:提取后的字段名: 原GELF日志中的字段路径,可根据你的实际字段自定义 log_level: level service_name: _service_name msg: short_message - labels: # 把上面提取的字段设置为Loki标签,方便后续过滤查询 log_level: service_name: ' \ 你的业务镜像名
- 如需全局配置所有容器的日志解析规则,修改
/etc/docker/daemon.json添加对应log-opts配置,重启Docker服务后生效。
方案2:在Loki服务端配置全局 ingestion pipeline(适合多节点统一管理)
如果你有多台服务器的日志都发到同一个Loki实例,可以直接在Loki的配置文件中添加全局处理规则,匹配对应日志流后自动做JSON解析和标签提取,无需修改每台机器的Docker配置。
小提示
GELF格式的自定义字段默认以下划线开头,提取时需要写全原字段名,比如原GELF字段为_user_id,提取时配置为user_id: _user_id即可。
配置完成后重启对应服务,即可在Grafana的日志查询页看到你提取的自定义标签,直接用标签语法过滤日志即可。
内容的提问来源于stack exchange,提问作者sja
相关产品推荐
相关产品推荐

