InfiniBand-Übersicht

InfiniBand (IB) ist eine Hochleistungsverbindung, die in HPC-Clustern und KI-Rechenzentren eingesetzt wird, wo Latenz und Durchsatz zwischen Nodes entscheidend sind. Es wird von der InfiniBand Trade Association (IBTA) standardisiert.

Was es auszeichnet

• Sehr niedrige Latenz und hohe Bandbreite zwischen Servern.
• RDMA (Remote Direct Memory Access) – ein Node liest oder schreibt den Speicher eines anderen mit geringer CPU-Beteiligung.
• Verlustfreie, kreditbasierte Flusssteuerung, wie bei Fibre Channel.

Links und Breiten

Ein IB-Link ist aus Lanes aufgebaut; gängige Breiten sind ×1, ×4 und ×12, wobei ×4 der übliche Port ist. Ein ×4-Port passt natürlich zu einem Modul der QSFP-Familie, sodass sich InfiniBand und High-Rate-Ethernet oft dieselben Transceiver-Gehäuse teilen.

Raten

Jede IB-Generation erhöht die Signalisierungsrate pro Lane (SDR, DDR, QDR, FDR, EDR, HDR, NDR …). Die Werte pro Lane und die ×4-Summenwerte stehen in InfiniBand-Geschwindigkeiten.

Optische InfiniBand-Module tragen Identität und Diagnose im selben verwalteten Speicher, den CodingBox auch für andere Transceiver ausliest.

Weiterführende Informationen

• IB-Protokoll & -Transport – Schichten, LIDs/GIDs/PKeys, Queue Pairs und RDMA, Credit-Flusssteuerung, der Subnet-Manager, Diagnosetools.
• IB-Verkabelung nach Generation – Steckverbinder von QDR bis XDR, Reichweitenklassen für DAC/ACC/AOC/Transceiver, NDR-Twin-Port und Split-Kabel, OSFP mit Rippen vs. flach.