ConnectX-7 400G 网卡怎么选:端口、PCIe 与服务器适配检查
围绕具体 OPN、协议与默认速率、OSFP 端口、PCIe 代际、服务器卡型和链路配套,说明 ConnectX-7 400G 网卡的选型检查方法。

ConnectX-7 产品名称相同,不代表卡型、协议、端口和默认速率相同。采购 400G 网卡时,真正需要锁定的是完整 OPN、硬件版本、InfiniBand 或以太网能力、端口封装、PCIe 链路以及服务器支持情况。只写“ConnectX-7 400G”不足以形成可执行的物料清单。
NVIDIA 的 ConnectX-7 适配卡手册列出了多种立式卡和 OCP 形态,并明确区分 400Gb/s、200Gb/s、协议能力和 PCIe 支持。选型工作的重点,是把这些字段与服务器插槽、交换机端口和实际布线逐项对应。
先从完整 OPN 开始
OPN 决定的内容可能包括卡型、端口数量、协议、默认速率、散热设计和硬件版本。部分 ConnectX-7 型号的 VPI 能力还与硬件修订版本有关,不能根据系列名称直接外推。询价或做 BOM 时应保留完整 OPN,并把替代型号单独列出,不要在同一行用“ConnectX-7 或同等型号”代替。
如果项目仍在方案阶段,可以先用能力字段筛选;进入采购阶段后,必须回到具体 OPN 和服务器支持资料。这样才能判断同一张卡在目标平台上是否需要特定挡板、辅助供电、散热配置或固件基线。
五个字段必须成组确认
| 字段 | 需要确认的内容 | 常见误区 |
|---|---|---|
| 协议与速率 | InfiniBand、以太网或 VPI;400G/200G;默认工作模式 | 看到 400G 就认为协议和速率可自动切换 |
| 端口 | 端口数量、OSFP 或其他封装、是否涉及分拆 | 只核对接口外形 |
| 主机接口 | PCIe x16、Gen 4/5、实际协商宽度和速率 | 插槽能插入就视为满足带宽条件 |
| 机械与散热 | HHHL/OCP、挡板、插槽功耗、风道 | 忽略服务器风向和卡位限制 |
| 软件基线 | 操作系统、驱动、固件、RDMA 栈和管理工具 | 到货后才确认版本兼容 |
400G 端口不等于主机一定能跑满
网卡端口速率只是链路能力的一部分。主机侧还要检查 PCIe 是否按预期的代际和通道宽度协商,以及网卡与 GPU、CPU 的 NUMA 距离。若插槽共享 PCIe 交换路径、通道被降宽,或卡落在远端 NUMA,应用吞吐和尾部时延可能先受主机拓扑限制。
对 GPU 集群,应在服务器选型阶段记录 GPU、网卡、CPU 插槽和 PCIe Switch 的拓扑。部署后再通过系统拓扑、PCIe 链路状态和实际 RDMA/NCCL 测试复核,不用单次带宽结果替代拓扑检查。
交换机、模块和线缆要放在同一条链路里
ConnectX-7 的具体端口形态必须与交换机端口、模块或线缆 OPN 一起确认。OSFP、QSFP112 等名称描述的是封装,不能单独证明协议、通道、调制方式和分拆模式兼容。NDR 400G、NDR200 或 400GbE 还涉及两端工作模式和端口配置。
建议用逐链路表记录服务器、网卡 OPN、交换机端口、目标速率、模块或线缆 OPN、长度和分拆关系。链路数量较多时,逐链路表比按产品分类的采购清单更容易发现一端 400G、另一端 200G 或分支数量不一致的问题。
询价前准备这些信息
缺少正式支持矩阵或目标服务器尚未定型时,应把兼容性写成待确认项,而不是给出确定承诺。价格、库存、交期和保修范围也必须针对最终 OPN 和交付地区单独核实。
- 服务器品牌、完整型号、CPU 配置和可用 PCIe/OCP 插槽。
- 目标协议、单端口速率、端口数量以及是否需要双 rail。
- 交换机型号、端口模式、机柜距离和计划使用的介质。
- 操作系统、驱动或固件基线,以及是否存在固定版本约束。
- 完整 OPN、数量、备件比例和允许替代的边界。
到货后按链路验收
到货验收先核对 OPN、硬件版本、挡板和散热方向,再检查设备识别、PCIe 协商、固件版本、端口状态和错误计数。基础连通后,分别执行主机带宽、RDMA 和业务通信测试,并保留测试配置、消息尺寸、并发方式和持续时间。
一张卡在某台服务器中可以识别,只能说明基础枚举成功。它不能替代服务器支持确认、链路兼容性检查和负载下的稳定性测试。