多节点机器上如何判断NCCL是否已安装及安装位置？

一、确认NCCL完整安装状态 #

• 扩大头文件搜索范围，不要局限于/usr目录，执行以下命令查找：

  find / -name "nccl.h" 2>/dev/null
  

  常见的NCCL头文件存放路径包括/usr/local/cuda/include、/opt/nvidia/nccl/include等，可能随安装方式不同而变化。
• 如果仍找不到头文件，说明系统仅安装了NCCL运行库，缺少开发依赖包。CentOS环境下，若通过yum包管理安装，需补充安装开发包：

  sudo yum install nccl-devel
  

  若是手动编译安装的NCCL，需确认编译过程中是否生成并安装了头文件，或是否仅复制了库文件而遗漏头文件。

二、手动指定路径编译测试代码 #

找到nccl.h和libnccl.so的具体路径后，编译时直接指定头文件搜索路径（-I）和库文件搜索路径（-L）：

gcc -o nccl_version nccl_version.c -I<nccl.h所在目录> -L<libnccl.so所在目录> -lnccl -lcuda

示例：若头文件在/usr/local/cuda/include，库文件在/usr/local/cuda/lib64，命令为：

gcc -o nccl_version nccl_version.c -I/usr/local/cuda/include -L/usr/local/cuda/lib64 -lnccl -lcuda

三、设置环境变量简化后续操作 #

找到NCCL的根目录（比如/opt/nvidia/nccl）后，配置环境变量：

export NCCL_HOME=/opt/nvidia/nccl
export C_INCLUDE_PATH=$NCCL_HOME/include:$C_INCLUDE_PATH
export LD_LIBRARY_PATH=$NCCL_HOME/lib64:$LD_LIBRARY_PATH

配置后后续编译无需重复手动指定路径。

内容的提问来源于stack exchange，提问作者KansaiRobot