Karpenter自定义启动模板：Ubuntu20.04+Cuda11.6 bootstrap脚本咨询

官方现成脚本可用 #

AWS针对EKS优化的Ubuntu 20.04 AMI，默认预装了适配的bootstrap.sh脚本，路径为/etc/eks/bootstrap.sh。这个脚本和AL2版本的逻辑对齐，能处理Karpenter自动传递的集群API服务器主机名、CA证书等参数，自动完成节点注册到EKS集群的流程。你可以直接在Karpenter的启动模板中调用该脚本，无需额外编写基础逻辑。

自定义脚本编写要点（适配Cuda 11.6环境） #

如果官方脚本无法满足Cuda 11.6的安装需求，你可以基于官方逻辑编写自定义bootstrap脚本，核心要点如下：

• 集群连接配置：从Karpenter注入的参数（如--apiserver-endpoint、--b64-cluster-ca）中获取集群信息，生成kubelet所需的kubeconfig文件，确保kubelet能正常连接Kubernetes API。
• Cuda 11.6环境部署：在脚本中加入Cuda工具包和NVIDIA驱动的安装步骤，比如添加NVIDIA官方软件源、安装指定版本的Cuda包，同时配置containerd以支持GPU容器运行。
• kubelet适配调整：针对Ubuntu环境设置kubelet的启动参数，比如指定containerd的运行时端点（unix:///run/containerd/containerd.sock），按需添加节点标签、污点，满足Karpenter的调度策略。
• 依赖前置安装：确保安装curl、jq、containerd等必要工具，避免bootstrap过程中出现依赖缺失问题。

简单示例脚本片段 #

#!/bin/bash
set -euo pipefail

# 接收Karpenter传递的集群参数
CLUSTER_NAME="$1"
APISERVER_ENDPOINT="$2"
B64_CLUSTER_CA="$3"

# 生成kubelet配置文件
mkdir -p /var/lib/kubelet
cat > /var/lib/kubelet/kubeconfig << EOF
apiVersion: v1
clusters:
- cluster:
    certificate-authority-data: ${B64_CLUSTER_CA}
    server: ${APISERVER_ENDPOINT}
  name: ${CLUSTER_NAME}
contexts:
- context:
    cluster: ${CLUSTER_NAME}
    user: kubelet
  name: kubelet
current-context: kubelet
kind: Config
users:
- name: kubelet
  user:
    tokenFile: /var/lib/kubelet/kubeconfig-token
EOF

# 安装Cuda 11.6及NVIDIA容器工具包
curl -fsSL https://nvidia.github.io/libnvidia-container/gpgkey | gpg --dearmor -o /usr/share/keyrings/nvidia-container-toolkit-keyring.gpg
curl -s -L https://nvidia.github.io/libnvidia-container/ubuntu20.04/libnvidia-container.list | sed 's#deb https://#deb [signed-by=/usr/share/keyrings/nvidia-container-toolkit-keyring.gpg] https://#g' | tee /etc/apt/sources.list.d/nvidia-container-toolkit.list
apt-get update && apt-get install -y --no-install-recommends cuda-11-6 nvidia-container-toolkit
nvidia-ctk runtime configure --runtime=containerd
systemctl restart containerd

# 启动并启用kubelet
systemctl enable --now kubelet

内容的提问来源于stack exchange，提问作者Gary