K8s Pod自动重启后无法查看历史日志，如何排查容器崩溃问题？

错误原因 #

当Pod频繁重启，或者集群配置了容器日志自动清理策略时，已终止的旧容器实例可能被系统清理，导致kubectl logs -p命令找不到对应容器。

排查方法 #

• 查看Pod状态详情与事件
  执行命令获取Pod的完整状态和事件记录，里面会包含容器终止的原因（如OOMKilled、退出码）、重启触发事件等关键信息：

  kubectl describe pod mypod-766c995f8b-zshgc -n ricplt
  

• 直接访问容器运行时的日志文件
  根据集群使用的容器运行时，直接到宿主机上查找日志文件：

  1. 获取当前容器ID：

     kubectl get pod mypod-766c995f8b-zshgc -n ricplt -o jsonpath='{.status.containerStatuses[0].containerID}'
     

     输出类似docker://abc123...，去掉前缀得到纯容器ID。
  2. 查找日志文件：
     • 若使用Docker：日志路径为/var/lib/docker/containers/<容器ID>/<容器ID>-json.log
     • 若使用containerd：日志路径为/var/lib/containerd/io.containerd.runtime.v1.linux/k8s.io/<容器ID>/log.json

• 配置日志持久化或集中采集

  • 在Pod的容器配置中添加volumeMounts，将容器日志目录挂载到宿主机目录或持久化存储，避免容器清理后日志丢失。
  • 部署日志采集工具（如Fluentd、Loki），实时将容器日志同步到集中存储系统，即使容器被清理也能回溯历史日志。

• 临时调整Pod重启策略
  若业务允许，可临时将Pod的restartPolicy改为Never，这样容器崩溃后不会自动重启，此时就能用kubectl logs -p查看终止容器的日志（操作完成后记得改回原策略）。

• 尝试完整参数指定容器
  即使只有一个容器，也可以显式指定容器名尝试：

  kubectl logs --previous=true mypod-766c995f8b-zshgc container-ricplt-e2term -n ricplt
  

内容的提问来源于stack exchange，提问作者myquest9 sh