Anthos Config Management失败提交后无法渲染新提交处理方案
不需要重置集群内所有ACM配置,这个问题是root-reconciler触发资源版本冲突后进入死锁导致的,按以下步骤操作即可恢复同步:
根因判断
从提供的RootSync状态可以直接定位问题:
- 渲染阶段已经拉取到最新提交
[NEWCOMMIT],但因为前序同步流程卡在旧提交[OLDCOMMIT]的错误上,直接跳过了新提交的渲染步骤,对应状态里的Rendering skipped提示 - 报KNV2009错误是因为reconciler更新
resourcegroups.kpt.dev/root-sync对象时,本地缓存的资源版本和集群侧存储的最新版本不一致,内置重试逻辑进入死循环,不会主动拉取新版本推进流程
操作步骤
- 先重启卡住的reconciler Pod,清空错误缓存
直接删除当前运行的root-reconciler实例,对应的Deployment会自动拉起新的Pod:kubectl delete pod -n config-management-system -l app=reconciler,configsync.gke.io/reconciler=root-reconciler - 如果重启后还是卡旧提交,手动清理冲突的ResourceGroup残留状态
执行命令编辑对应ResourceGroup对象:
打开编辑器后直接删掉整个kubectl edit resourcegroups.kpt.dev -n config-management-system root-syncstatus字段块,保存退出即可,新启动的reconciler会自动重建正确的状态字段。 - 恢复验证
等30秒左右(覆盖两个15s的默认同步周期),执行命令查看RootSync状态:
当kubectl get rootsync -n config-management-system root-sync -o yamlstatus.rendering.commit、status.source.commit、status.sync.commit三个字段都更新为最新提交哈希,且status.sync.errors为空时,同步就恢复正常了。
避坑提示
- 不要随意修改config-management-system命名空间下reconciler关联的Deployment、Role、ServiceAccount这类核心资源,仅重启Pod或者清理ResourceGroup状态即可
- 你的实例是Hub托管的ACM,不要手动修改RootSync的spec配置,否则会被Hub控制器直接覆盖回去
- 整个操作不会删除已经通过ACM下发的存量资源,不会引发业务配置漂移
内容的提问来源于stack exchange,提问作者ourobor93
相关产品推荐
相关产品推荐

