Kubernetes Job执行完成后容器被CPU Manager删除，如何保留容器查看日志？

你碰到的情况是Kubernetes v1.24.x集群里的Job执行完成后，对应Pod的容器被CPU Manager的RemoveStaleState逻辑主动清理，进而无法获取容器日志。默认情况下K8s会保留已完成Pod的容器状态，但CPU Manager的状态同步机制会误判已完成容器为“过期状态”并删除，导致日志丢失。

下面是几种可行的解决方法：

1. 调整Pod的生命周期保留策略 #

通过Job的Pod模板配置，延长已完成Pod的保留时间，给CPU Manager的清理逻辑留足日志查询窗口：

apiVersion: batch/v1
kind: Job
metadata:
  name: pi
spec:
  template:
    spec:
      containers:
      - name: pi
        image: perl:5.34.0
        command: ["perl",  "-Mbignum=bpi", "-wle", "print bpi(2000)"]
      restartPolicy: Never
      terminationGracePeriodSeconds: 3600 # 把容器优雅退出后的保留时间设为1小时
  ttlSecondsAfterFinished: 86400 # 完成后Pod整体保留24小时

注意：ttlSecondsAfterFinished需要集群启用TTLAfterFinished特性门控（K8s 1.21及以上版本默认启用）。

2. 临时禁用CPU Manager（仅适合测试环境） #

如果你的集群不需要CPU核心绑定这类高级CPU管理功能，可以直接关闭CPU Manager，彻底避免它的清理操作：

• 编辑kubelet的配置文件（通常路径是/var/lib/kubelet/config.yaml），修改配置项：

cpuManagerPolicy: "none"

• 重启kubelet服务：systemctl restart kubelet
  这种方法会关闭CPU Manager的所有功能，不推荐在生产环境使用。

3. 调整CPU Manager的状态同步频率 #

对于需要保留CPU Manager功能的场景，可以拉长它的状态检查间隔，降低误删已完成容器的概率：

• 在kubelet的启动参数中添加或修改：

--cpu-manager-reconcile-period=5m

• 重启kubelet服务
  这个参数控制CPU Manager同步节点容器状态的频率，延长间隔可以给你足够的时间去查询日志。

4. 实时导出日志到外部存储（生产环境首选） #

最稳妥的方式是用日志采集工具（比如Fluentd、Loki、Filebeat）把容器日志实时同步到外部存储系统（比如Elasticsearch、对象存储）。就算容器被删除，日志依然能从外部存储里查询，完全不受容器生命周期限制，这也是生产环境的标准做法。

验证配置有效性 #

重新运行Job，等执行完成后过一段时间，用以下命令尝试查询日志：

kubectl logs <你的Pod名称> pi

如果能正常返回日志，说明配置生效了。

内容的提问来源于stack exchange，提问作者sb9