Infiniband專為高性能計算設計,採用原生RDMA技術,提供超低延遲和高吞吐量,支持無阻塞Fat-Tree拓撲,在大型模型訓練(如千卡GPU集羣)中能顯著減少通信瓶頸,但其有別於以太網的物理層標準,對光模塊設計研發提出了不一樣的要求。今天整理40G~800G IB物理層吞吐量、線速度、編碼開銷、帶寬,為各位在IB設備選型提供快速參考。IB物理層通道數支持1/2/4/8/12通道,本次選取常用可插拔光模塊的4/8通道數彙總。在最新IB協議2.0中規定支持多種FEC模式,並且在低延遲模式下EDR和HDR支持RS-FEC(271,257),NDR支持RS-FEC(272,257+1),XDR支持RS-FEC(274,260),本文彙總是取一般模式下FEC的選用。
轉碼功能(64B/66B轉換成256B/257B)
FEC模式必須在64B/66B編碼下使用,每4個66比特位轉換塊為一個257比特位,轉碼塊的第一個比特位用於定義轉碼塊類型,區分數據轉碼塊或控制轉碼塊,有效比特位為256位。轉碼功能通過將轉碼塊的第一個比特位設為1來指示數據轉碼塊,通過設為0來指示控制轉碼塊。
計算公式請參考之前的文章。低延遲模式下請帶入低延遲RS-FEC進行計算。