Overzicht van InfiniBand

InfiniBand (IB) is een krachtige interconnect voor HPC-clusters en AI-datacenters, waar latency en doorvoer tussen nodes cruciaal zijn. De standaard wordt beheerd door de InfiniBand Trade Association (IBTA).

Wat InfiniBand onderscheidt

• Zeer lage latency en hoge bandbreedte tussen servers.
• RDMA (Remote Direct Memory Access): één node leest of schrijft het geheugen van een andere met weinig tussenkomst van de CPU.
• Verliesloze, op credits gebaseerde flow control, net als bij Fibre Channel.

Links en breedtes

Een IB-link bestaat uit lanes; gebruikelijke breedtes zijn ×1, ×4 en ×12, waarbij ×4 de gebruikelijke poort is. Een ×4-poort past natuurlijk bij een module uit de QSFP- familie, waardoor InfiniBand en Ethernet met hoge snelheid vaak dezelfde transceiver- behuizingen gebruiken.

Snelheden

Elke IB-generatie verhoogt de signaalsnelheid per lane (SDR, DDR, QDR, FDR, EDR, HDR, NDR …). De waarden per lane en het totaal voor ×4 staan in InfiniBand-snelheden.

Optische InfiniBand-modules slaan identiteit en diagnostiek op in hetzelfde beheerde geheugen dat CodingBox voor andere transceivers leest.

Verder lezen

• IB-protocol en -transport: lagen, LIDs/GIDs/PKeys, queue pairs en RDMA, flow control op basis van credits, de subnet manager en diagnostische tools.
• IB-bekabeling per generatie: connectoren van QDR tot XDR, bereikklassen voor DAC/ACC/AOC/transceivers, NDR twin-port en splitkabels, OSFP met koelribben of vlak bovenvlak.