Mellanox ConnectX-7 ib_write_bw测试带宽从395Gb/s骤降至248Gb/s问题求助
Mellanox ConnectX-7 ib_write_bw测试带宽从395Gb/s骤降至248Gb/s问题求助
各位好,我最近做InfiniBand带宽测试时遇到了个头疼的问题,想请大家帮忙分析排查下:
我有两台机器,通过两块ConnectX-7网卡直连。跑ib_write_bw测试的时候,刚开始平均带宽能冲到395Gb/s,这个表现本来挺满意的,但没过多久带宽就快速掉落到250Gb/s以下,最低的时候甚至只有248Gb/s,波动实在太大了。
我已经收集了相关的PCI设备状态信息和测试日志,内容如下:
PCI状态信息
(此处粘贴具体的PCI状态输出内容)
测试日志
(此处粘贴完整的ib_write_bw测试日志内容)
有没有大佬碰到过类似的情况?会不会是网卡过热降频、驱动配置没调好,或者是硬件链路存在隐性问题?麻烦各位帮忙指点下排查方向,非常感谢!
备注:内容来源于stack exchange,提问作者Xiaoquan Li




