Kubernetes：避免Pod因DiskPressure被驱逐的最佳实践

除了直接扩容节点磁盘空间，你可以从以下几个维度优化来解决问题：

一、优化导出操作本身，降低磁盘占用 #

• 流式导出至外部存储：避免将导出文件落地到Pod所在节点的磁盘，直接通过管道将导出数据传输到对象存储或远程文件服务器。例如使用数据库导出工具结合aws s3 cp、curl等命令，实现边导出边上传，完全不占用本地磁盘空间。
• 分批次导出：将全量视图拆分为多个小批次任务，每次仅导出部分数据，完成后立即清理临时文件，再执行下一批次。这样单批次的磁盘占用量远低于全量导出，避免触发磁盘压力阈值。
• 实时压缩导出数据：导出时直接对数据进行压缩，大幅减少磁盘占用体积。比如PostgreSQL可以用pg_dump mydb | gzip > dump.sql.gz，MySQL用mysqldump mydb | xz -z > dump.sql.xz，压缩比通常能达到5:1甚至更高。

二、调整Pod存储配置，规避节点根磁盘限制 #

• 使用独立PVC存储卷：为导出Pod挂载单独的PersistentVolumeClaim（PVC），将导出文件写入PVC而非节点的根磁盘。这样节点的空闲空间不再成为瓶颈，只要PVC的容量足够即可。
• 采用内存型临时存储：如果导出过程的临时数据量在内存承受范围内，可配置emptyDir.medium: Memory，让Pod的临时文件存储在内存中，完全不占用磁盘空间。注意要合理设置Pod的内存资源限制，避免触发OOMKilled。
• 合理配置临时存储资源请求：在Pod的资源配置中明确ephemeral-storage的requests和limits，Kubernetes调度器会根据这个值将Pod调度到有足够临时存储资源的节点上，避免因节点磁盘不足被驱逐。

三、优化节点磁盘管理，释放空闲空间 #

• 清理节点冗余资源：手动或通过自动化工具清理节点上的旧容器镜像、未使用的容器卷、过期日志文件。例如用docker system prune -a清理无用镜像和容器，或配置日志轮转策略限制日志文件的总大小和保留时长。
• 调整kubelet驱逐阈值：修改kubelet的evictionHard或evictionSoft参数，适当降低磁盘压力的触发阈值（比如将nodefs.available<10%调整为nodefs.available<5%）。但此操作需谨慎，要确保节点不会因磁盘耗尽导致系统崩溃，建议在非核心节点先测试。

四、调度策略优化 #

• 定向调度至空闲磁盘节点：通过节点标签（如disk-type: high-capacity）和Pod的nodeSelector，将导出Pod调度到磁盘空间充足的节点上。如果节点有污点，可配合tolerations让Pod能调度过去。
• 错峰执行导出任务：将大规模导出任务安排在业务低峰时段执行，此时节点的磁盘占用率较低，更不容易触发DiskPressure驱逐。

内容的提问来源于stack exchange，提问作者vukojevicf