AI 互连与光模块
AI 集群使用 InfiniBand 或高速以太网连接 GPU。两者都把光模块推向了量产中速度最快的型号。
InfiniBand 与以太网(RoCE)
| InfiniBand | 以太网 + RoCE | |
|---|---|---|
| 流控 | 基于信用、无损 | PFC/ECN,无损 |
| RDMA | 原生支持 | RoCEv2 |
| 当前速率 | NDR(400G) | 400G / 800G |
| 生态 | 源自 HPC | 广泛,多厂商 |
两者都是可行的选择;许多大型集群使用 InfiniBand,而以太网+RoCE 在大规模 AI 场景中增长很快。
速率与模块
- 400G——QSFP-DD 或 OSFP,由 4×100G 或 8×50G 通道构成。
- 800G——OSFP 或 QSFP-DD800,通常为 8×100G 通道。
速率和通道数决定了封装形式; InfiniBand 各代及其每通道速率见 InfiniBand 速率。
传输距离类型
机柜内以短距 DR/SR 光模块或直连线缆、有源线缆为主;行与行之间, FR/LR 单模光模块承担更长的跳段。高密度意味着单台交换机可容纳数百个这样的模块。
无论传输距离如何,这些模块都携带标准的受管存储器——CodingBox 在链路加入组网之前读取其身份信息和 DDM 以进行验证。