CodingBox 說明文件

InfiniBand 概覽

InfiniBand(IB)是一種用於 HPC 集群和 AI 數據中心的高性能互連技術,在這些場景中節點間的延遲和吞吐量至關重要。它由 InfiniBand 貿易協會(IBTA) 制定標準。

與眾不同之處

  • 極低的延遲和伺服器之間的高頻寬。
  • RDMA(遠程直接記憶體訪問)——一個節點幾乎無需 CPU 參與即可讀寫另一個節點的記憶體。
  • 與 Fibre Channel 一樣,基於信用的無損流量控制。

鏈路與寬度

IB 鏈路由通道組成;常見的寬度有 ×1、×4 和 ×12,×4 是常見端口。×4 端口自然對應 QSFP 系列模組,因此 InfiniBand 和高速以太網常常共用相同的光模組外殼。

速率

每一代 IB 都會提高每通道信號速率(SDR、DDR、QDR、FDR、EDR、HDR、NDR……)。每通道及 ×4 聚合速率數據列於 InfiniBand 速率

光學 InfiniBand 模組將身份資訊和診斷數據存放在與其他光模組相同的受管理記憶體區中,CodingBox 會讀取該記憶體區。

延伸閱讀

  • IB 協議與傳輸——協議層、LID/GID/PKey、隊列對與 RDMA、信用流量控制、子網管理器、診斷工具。
  • 按代際劃分的 IB 佈線—— 從 QDR 到 XDR 的連接器、DAC/ACC/AOC/光模組的傳輸距離等級、NDR 雙端口與分支電纜、帶散熱片與平頂 OSFP。

如果您發現本文有不準確之處或錯誤,請選取相應片段並按 Ctrl+Enter,即可