能否无需docker buildx create直接运行BuildKit？需支持动态扩缩容构建池

核心结论 #

完全可以直接通过docker run启动BuildKit容器，实现和docker buildx create等效的远程构建器功能，且完美适配你提到的HAProxy反向代理场景——BuildKit的gRPC通信不要求每次连接绑定同一后端，只要反向代理能正确转发TCP流量，就能自动适配动态扩缩容的BuildKit节点。

具体实现步骤 #

1. 启动BuildKit容器（支持自动扩缩容） #

用docker run直接启动BuildKit服务，暴露gRPC端口并配置必要权限：

docker run -d \
  --name buildkit-x86 \
  --privileged \
  -p 1234:1234 \
  moby/buildkit:latest \
  --addr tcp://0.0.0.0:1234

• --privileged：BuildKit需要特权模式处理容器内的构建操作
• --addr tcp://0.0.0.0:1234：指定通过TCP端口对外提供gRPC服务，方便反向代理接入

2. 配置Buildx连接到HAProxy #

在Jenkins构建节点上，直接创建Buildx builder指向HAProxy地址，无需跟踪单个BuildKit实例：

docker buildx create \
  --name multi-arch-builder \
  --driver remote \
  tcp://haproxy-service:1234 \
  --use

后续所有docker buildx build命令都会通过HAProxy路由到可用的BuildKit后端。

3. HAProxy关键配置 #

BuildKit基于gRPC通信，HAProxy需配置为TCP模式转发流量，同时启用自动后端发现和健康检查。示例配置片段：

frontend buildkit-frontend
  bind *:1234
  mode tcp
  default_backend buildkit-backends

backend buildkit-backends
  mode tcp
  balance roundrobin
  server-template buildkit-node 10 buildkit-service:1234 check inter 5s downinter 5s

• server-template：自动发现集群中所有BuildKit服务实例，适配动态扩缩容
• check：定期检测后端健康状态，自动剔除不可用节点

额外优化建议 #

• 为BuildKit配置持久化存储：挂载卷到容器/var/lib/buildkit目录，保留构建缓存，避免重复拉取基础镜像
• Jenkins节点轻量化：仅安装docker-buildx插件，无需完整Docker环境，直接通过gRPC连接HAProxy
• 监控构建器状态：利用BuildKit的/healthzHTTP端点或gRPC健康检查接口，配合集群监控工具跟踪节点状态

内容的提问来源于stack exchange，提问作者Jolly Roger