为什么docker容器内外nvidia-smi显示的CUDA版本和驱动版本一致？

认知验证 #

你此前的认知完全正确：

• NVIDIA驱动属于内核态程序，和宿主机硬件深度绑定，无需在容器镜像中重复安装
• nvidia-docker（现已整合为nvidia-container-runtime）的核心作用就是在容器启动时，将宿主机的GPU设备节点、驱动用户态接口、配套工具挂载进容器Namespace，打通容器内CUDA程序和宿主机驱动的通信链路，实现容器对GPU硬件的复用。

nvidia-smi版本显示差异原因 #

你观察到的版本差异是正常现象，核心原因是存在两种完全不同的CUDA版本概念：

• CUDA驱动最高兼容版本：就是nvidia-smi输出中显示的11.4版本，这个数值完全由宿主机安装的NVIDIA驱动版本决定，代表当前驱动可以支持的最高CUDA runtime版本，和容器内安装的软件无关。你在容器内调用的nvidia-smi本身就是nvidia-container-runtime从宿主机挂载进容器的驱动配套工具，所以输出和宿主机执行nvidia-smi的结果完全一致。
• 容器实际使用的CUDA runtime版本：就是你在容器/usr/local路径下看到的10.0版本，是nvidia/cuda:10.0-base镜像内置的CUDA运行时版本，容器内编译运行CUDA程序实际依赖的是这个版本。只要该版本≤宿主机驱动支持的最高CUDA版本（11.4≥10.0），就可以正常运行，符合CUDA向后兼容的设计规则。

相关学习方向 #

你可以从以下官方资料方向梳理相关逻辑：

• NVIDIA容器运行时技术架构说明
• CUDA版本向后兼容规则官方说明
• NVIDIA驱动与CUDA版本对应关系官方对照表

内容的提问来源于stack exchange，提问作者Alex Armbruster