GKE Autopilot集群Kubernetes Job临时卷使用受存储限制问题求助

问题核心 #

你遇到的矛盾在于：GKE Autopilot对Pod的**ephemeral-storage（本地临时存储）**有严格上限（默认最高10Gi），这个限制包含容器根文件系统和所有未使用tmpfs的emptyDir卷。你配置的100Gi emptyDir卷会被计入这个总限制，因此即使卷本身存在，写入时仍会触发1Gi/10Gi的限制报错。

解决步骤 #

1. 改用PersistentVolumeClaim（PVC）替代emptyDir临时卷 #

Autopilot允许通过PVC申请更大的持久化存储（基于GCE Persistent Disk），不受ephemeral-storage的10Gi上限约束。先创建PVC配置文件：

apiVersion: v1
kind: PersistentVolumeClaim
metadata:
  name: backup-restore-pvc
spec:
  accessModes:
    - ReadWriteOnce
  resources:
    requests:
      storage: 100Gi  # 根据实际备份大小调整
  storageClassName: standard-rwo  # Autopilot默认存储类，可按需替换为其他类

执行kubectl apply -f pvc.yaml完成PVC创建。

2. 修改Job配置，挂载PVC而非emptyDir #

调整Job的YAML文件，替换原emptyDir卷为PVC挂载：

apiVersion: batch/v1
kind: Job
metadata:
  name: backup-restore-job
spec:
  template:
    spec:
      containers:
      - name: restore-container
        image: your-image:tag
        command: ["your-restore-script.sh"]
        volumeMounts:
        - name: backup-storage
          mountPath: /backup  # 确保脚本下载、解压路径指向此目录
        resources:
          limits:
            cpu: "5"
            ephemeral-storage: 1Gi  # 保留此限制，仅用于容器自身临时文件
            memory: 6Gi
          requests:
            cpu: "5"
            ephemeral-storage: 1Gi
            memory: 6Gi
      volumes:
      - name: backup-storage
        persistentVolumeClaim:
          claimName: backup-restore-pvc
      restartPolicy: OnFailure

3. 验证存储可用性 #

部署Job后，进入Pod检查挂载路径的可用空间：

kubectl exec -it <job-pod-name> -- df -h /backup

确认可用空间为申请的100Gi后，执行备份恢复操作即可。

关键说明 #

• Autopilot的ephemeral-storage限制仅针对本地临时存储（容器根目录、emptyDir），PVC使用集群持久化存储，不受此限制约束。
• 若必须使用临时存储（无需持久化），可考虑配置GCE Ephemeral Local SSD，但需通过节点选择器指定特定节点池，操作复杂度较高，PVC是更简便的方案。

内容的提问来源于stack exchange，提问作者Justin Lloyd