使用mpiexec在远程主机运行MPI程序时进程停滞的问题求助

核心排查方向 #

• MPI通信收尾异常
  第一台主机进程完成后未正确触发全局结束逻辑，或者第二台进程卡在等待未完成的通信。检查test_mpi代码里MPI_Finalize()是否在所有分支都被调用；同时确认两台主机使用的MPI版本完全一致，FDS自带的MPI环境不要和系统MPI冲突。
• 进程僵死与资源占用
  第二台主机进程内存占比不变但耗尽资源，大概率是进入死循环或等待未释放的同步锁。用tasklist（Windows）或ps -ef（Linux）查看进程状态，必要时用调试器附加进程，定位停滞的函数调用栈。
• FDS CMD环境干扰
  FDS自带的CMD可能有专属环境变量，导致MPI通信配置异常。直接在系统原生CMD/PowerShell里运行mpiexec -hosts 2 158.42.179.5 1 158.42.179.6 1 test_mpi，排除环境变量的影响。
• 跨主机权限与网络限制
  虽然ping通，但MPI跨主机运行通常需要无密码SSH登录权限，检查两台主机间是否能通过运行FDS的用户账号无密码互登；同时确认防火墙开放了MPI动态端口范围（或手动指定固定端口测试）。
• 命令参数与代码逻辑冲突
  你指定每台主机1个进程，但第一台输出了6个Hello World，说明test_mpi代码可能硬编码了进程数，或者FDS的MPI环境默认覆盖了mpiexec的进程数配置。先单独运行test_mpi，看单主机下实际启动的进程数是否符合预期。

快速验证动作 #

• 分别在两台主机单独运行test_mpi，确认单主机运行无异常；
• 用mpirun替换mpiexec执行相同命令，排查命令工具兼容性问题；
• 调整进程数为每台2个，观察是否仍出现停滞情况。

内容的提问来源于stack exchange，提问作者Sadae