如何在K8S集群多个小规格实例节点上运行高资源请求Pod

Kubernetes 不支持单个 Pod 跨多个节点运行。

Pod 是 Kubernetes 体系中最小的调度与运行单元，默认同一个 Pod 内的所有容器必须被调度到同一台节点上运行，Pod 声明的资源请求（CPU、内存）需要由单台节点的剩余可分配资源全额满足，无法拆分到多台节点聚合提供。你当前集群的节点规格均为2 vCPU、4GiB内存，远低于Pod申请的8 vCPU、32GiB内存，触发资源不足报错属于正常情况。

可采用的解决方案 #

• 调整节点组实例规格：替换现有节点组的EC2实例类型，选择单节点标称资源≥8 vCPU、32GiB的实例（注意实际可分配资源需要扣除kubelet、系统组件、EKS基础插件的占用，建议选择更高规格的实例如16 vCPU、64GiB配置，避免出现资源预留不足的调度失败）
• 拆分应用负载：如果你的应用支持分布式架构，可以将单体大Pod拆分为多个资源请求更小的微服务Pod，Kubernetes会将这些Pod调度到不同节点上运行，通过集群内Service、服务发现组件实现互相通信，等效使用多节点的聚合资源
• 采用分布式作业框架：如果是AI训练、大数据计算这类需要大算力的场景，可以引入MPI Operator、Volcano等分布式调度组件，将任务拆分为Master、Worker多组Pod分布在不同节点运行，实现跨节点资源聚合使用，不过该方案本质是多Pod协同，不是单Pod跨节点运行

内容的提问来源于stack exchange，提问作者Joey Yi Zhao