GKE Autopilot集群使用预留资源解决NVIDIA T4 GPU部署调度失败问题咨询

大家好，我最近在部署带NVIDIA T4 GPU的GKE应用时碰到了调度失败的问题，具体报错如下：

Node scale up in zones europe-west1-b associated with this pod failed: GCE out of resources. Pod is at risk of not being scheduled.

想到可能是资源不足导致的，我尝试在GCP上创建了一个资源预留，希望能让我的Pod优先使用预留的资源来解决调度问题。下面是我创建的预留资源详情（通过gcloud compute reservations describe命令获取）：

$ gcloud compute reservations describe reservation-t4-gpu --zone europe-west1-d
creationTimestamp: '2024-03-02T10:54:53.354-08:00'
id: '7770049776700017426'
kind: compute#reservation
name: reservation-t4-gpu
resourceStatus: {}
selfLink: https://www.googleapis.com/compute/v1/projects/my-project/zones/europe-west1-d/reservations/reservation-t4-gpu
shareSettings:
  shareType: LOCAL
specificReservation:
  assuredCount: '1'
  count: '1'
  inUseCount: '0'
  instanceProperties:
    guestAccelerators:
    - acceleratorCount: 1
      acceleratorType: nvidia-tesla-t4
    machineType: custom-1-8192-ext
    minCpuPlatform: Any CPU Platform
specificReservationRequired: true
status: READY

现在我有几个疑问想请教大家：

• 我该如何配置GKE Autopilot集群里的Pod，才能让它正确使用这个预留的资源？有没有必须要加的调度约束或者注解？
• 我的预留资源在europe-west1-d区，而之前调度失败的Pod是在europe-west1-b区尝试扩容，是不是需要调整Pod的调度区域到预留资源所在的区？如果需要的话，该怎么配置？
• 针对Autopilot集群使用GPU预留资源，有没有什么特殊的注意事项或者容易踩坑的点？

麻烦有经验的朋友帮忙解答一下，谢谢！

备注：内容来源于stack exchange，提问作者Noskol