Azure AKS节点缺失failure-domain标签致PV调度失败的解决咨询

在Azure AKS Kubernetes集群完成节点池版本升级后，某PV存在如下节点亲和性配置：

Node Affinity:
  Required Terms:
    Term 0:        failure-domain.beta.kubernetes.io/region in [westeurope]

但集群节点缺失该标签，导致Deployment创建的Pod因对应PVC无法调度而无法启动，报错信息如下：

Warning  FailedScheduling  15m    default-scheduler  0/3 nodes are available: 3 node(s) had volume node affinity conflict. preemption: 0/3 nodes are available: 3 Preemption is not helpful for scheduling..

尝试给节点添加该标签时，被准入Webhook拒绝：

Error from server: admission webhook "aks-node-validating-webhook.azmk8s.io" denied the request: (UID: 931bf139-1579-4e96-b164-e4e6e2fdae65) User is trying to add or update a non-changeable system label (failure-domain.beta.kubernetes.io/region:westeurope). This action is denied..

请问是否只能通过备份恢复PV移除该废弃标签？最佳处理流程或替代方案是什么？

无需通过备份恢复PV，以下是几种可行的解决方案，按推荐优先级排序：

方案一：直接修改PV的节点亲和性配置（推荐） #

直接编辑PV对象，移除废弃的亲和性规则即可解决调度冲突：

1. 执行命令进入PV编辑界面：

   kubectl edit pv <目标PV名称>
   

2. 在编辑器中定位到spec.nodeAffinity字段，删除包含failure-domain.beta.kubernetes.io/region的requiredTerms条目，保存并退出。
3. PVC会重新绑定，Pod调度约束解除后即可正常启动。

注意：编辑前确认该PV仅关联目标业务的PVC，避免误操作影响其他服务。

方案二：重新创建PV（适用于动态生成的PV） #

如果PV是由存储类动态创建的，可通过以下步骤替换PV：

1. 备份PV中的数据（可使用Azure磁盘快照或容器存储快照工具）。
2. 删除原PVC和PV。
3. 确认AKS集群使用的存储类已默认采用标准标签topology.kubernetes.io/region（新版本AKS存储类已自动适配），重新创建PVC。
4. 恢复数据至新PV，再重新部署Deployment。

方案三：临时禁用准入Webhook添加标签（仅限紧急场景） #

若必须保留PV的旧亲和性规则，可临时绕过AKS的节点验证Webhook添加标签，操作完成后立即恢复Webhook：

1. 删除验证Webhook配置：

   kubectl delete validatingwebhookconfiguration aks-node-validating-webhook
   

2. 给所有节点添加废弃标签：

   kubectl label nodes --all failure-domain.beta.kubernetes.io/region=westeurope
   

3. 恢复Webhook配置（可通过AKS集群的自动配置文件重新应用，或从集群备份中恢复）：

   kubectl apply -f <aks-node-validating-webhook配置文件>
   

注意：此操作会暂时降低集群安全校验能力，仅用于紧急排障，需尽快恢复Webhook。

内容的提问来源于stack exchange，提问作者icordoba