You need to enable JavaScript to run this app.
优惠活动
大模型
产品
解决方案
定价
更多

禁用Stackdriver后,如何在GKE中搭建ELF日志系统?

在GKE中禁用Stackdriver后搭建ELF日志栈的可行性方案及Stackdriver计费说明

当然可行!完全可以在禁用Stackdriver的GKE集群里搭建自己的ELF(Elasticsearch、Logstash、Fluentd/Fluent Bit)日志栈,这也是很多有自建日志系统经验团队的常规操作,我来给你拆解下具体思路和注意点:

一、ELF栈在GKE的搭建步骤

  • 替换节点默认日志代理:GKE默认用Stackdriver专属的fluentd镜像采集日志,你可以把这个DaemonSet替换成自定义的fluentd(或者更轻量的Fluent Bit)镜像。核心是让新代理能访问节点上容器的日志文件——通常这些日志存在/var/log/containers/目录下,所以要在DaemonSet的Pod配置里挂载主机的/var/log目录,确保代理有权限读取这些文件。
  • 部署ELK核心组件:
    • Elasticsearch:用StatefulSet部署,搭配GCP的持久卷(PersistentVolume)存储日志数据,根据你的日志量级调整节点数、CPU和内存资源限制,保证集群的稳定性;
    • Logstash:作为日志处理中间层,用Deployment部署即可。它负责接收fluentd发来的日志,做过滤、字段格式化等处理后转发到Elasticsearch;
    • Kibana:同样用Deployment部署,暴露Service后就能通过浏览器访问,用来可视化和分析日志数据。
  • 打通日志流转链路:配置fluentd/Fluent Bit,让它把采集到的容器日志发送到Logstash(也可以直接发送到Elasticsearch,减少中间环节)。注意要确保集群内部组件的网络连通性,比如给Logstash和Elasticsearch配置好Service,开放对应的端口。

二、关于Stackdriver计费的补充说明

你提到的150MB免费日志额度是GCP免费套餐的内容,Stackdriver(现在官方叫Cloud Logging)的计费确实是针对超出免费额度的日志量收取的。不过如果你们完全不想为此付费,直接禁用Stackdriver日志采集是完全没问题的——GKE只是默认启用它,并没有强制要求必须使用。

你引用的Kubernetes官方文档也印证了这种方案的合理性:

Kubernetes未指定日志代理,但发行版中包含两个可选代理:适用于GCP的Stackdriver Logging和Elasticsearch,二者均使用自定义配置的fluentd作为节点代理。

额外小提示

  • 如果觉得Fluentd对节点资源占用较高,可以换成Fluent Bit,它的资源消耗更低,更适合大规模集群场景;
  • 部署Elasticsearch时,建议开启集群监控和定期备份,避免日志数据丢失;
  • 可以利用GKE的Secret来存储ELF组件的敏感配置(比如Elasticsearch的访问密码),提升配置的安全性。

内容的提问来源于stack exchange,提问作者Alexandar Narayan

相关产品推荐
方舟 Agent Plan

超全模态模型 × Harness 升级,最新支持 Deepseek-V4.1-Flash、GLM-5.3 系列、Doubao-Seedream-5.0-pro、Kimi-K3 (部分), 限时 9.9 元起

最近更新时间:2026.05.28 09:51:42