Câblage IB par génération : DAC, AOC, transceivers, câbles split · InfiniBand · Technologies · Documentation · CodingBox
CodingBox Documentation

Câblage IB par génération : DAC, AOC, transceivers, câbles split

Un cluster InfiniBand est câblé par classe de portée : cuivre là où le commutateur est à portée de bras, cuivre actif un peu plus loin, câbles optiques actifs jusqu’à la rangée suivante, transceivers avec fibre structurée pour le reste. Chaque génération a resserré ces limites et changé le connecteur, et NDR a ajouté des modules double port et des câbles fractionnés qui déroutent les installateurs novices. Cette page est la référence de câblage — portées, connecteurs, configurations de fractionnement, règles mécaniques et d’identité.

Connecteurs par génération

GénérationDébit par voiePort 4xConnecteurRemarques
SDR / DDR2,5 / 5 Gb/s10 / 20 Gb/sCX4 (cuivre), puis QSFPhistorique
QDR10 Gb/s40 Gb/sQSFPgestion SFF-8436
FDR14,06 Gb/s56 Gb/sQSFP+ (qualifié FDR)64B/66B ; FEC optionnel
EDR25,78 Gb/s100 Gb/sQSFP28mêmes optiques que le 100G Ethernet, codage différent
HDR53,1 Gb/s PAM4200 Gb/sQSFP56fractionnement 1:2 vers HDR100
NDR106 Gb/s PAM4400 Gb/sOSFP double port (2 × 400G par module) sur les commutateurs ; OSFP ou QSFP112 sur les HCA800G par cage de commutateur
XDR212 Gb/s PAM4800 Gb/sOSFP / OSFP-XD1.6T par cage de commutateur

Détails des facteurs de forme : QSFP28, QSFP56, OSFP, QSFP112.

Classes de portée

SupportQDRFDREDRHDRNDRRemarques
DAC passif≤ 7 m≤ 3–5 m≤ 3 m≤ 2 m≤ 1,5–2 mla portée diminue à chaque génération ; calibre plus épais pour les longueurs plus importantes
Cuivre actif (ACC/AEC)—≤ 5 m≤ 5 m≤ 3–4 m≤ 3 mconnecteurs alimentés ; AEC avec retimers pour NDR
AOC≤ 100 m (parfois 300)≤ 100 m≤ 100 m≤ 100 m≤ 30–50 m typiqueVCSEL 850 nm, ruban MMF à l’intérieur
Transceiver classe SR (MMF)≤ 300 m≤ 100–150 m≤ 70–100 m≤ 70–100 m≤ 50 m (VR) / 100 m (SR)OM3/OM4, MPO
Transceiver classe DR/FR (SMF)——500 m – 2 km (PSM4, CWDM4)500 m – 2 km500 m (DR4) / 2 km (FR4)MPO-12 APC (DR4), LC duplex (FR4)

Ce qu’il y a à l’intérieur de chaque type de câble : Structure interne des câbles.

Câbles NDR double port et fractionnés

Une cage de commutateur NDR accueille un module OSFP double port = deux ports 400G indépendants derrière deux réceptacles MPO-12/APC (ou deux LC-duplex). Options de câblage à partir d’un module :

ConfigurationCâbleExtrémité distante
2 × 400G directdeux trunks MPO-12 APCdeux ports HCA NDR 400G (OSFP ou QSFP112) ou un autre commutateur
Fractionnement 1:2 (800G → 2 × 400G)câble en Y, une extrémité OSFP, deux extrémités OSFP/QSFP112deux HCA — la connexion serveur standard
Fractionnement 1:4 (800G → 4 × 200G)une extrémité OSFP, quatre extrémités QSFP56/QSFP112HCA à débit HDR (NDR200)
AOC double portune extrémité OSFP double port, deux extrémités OSFP/QSFP112jusqu’à ~30–50 m
DAC double portune extrémité OSFP, deux extrémités≤ 1,5–2 m ; lourd — en baie uniquement

Chaque branche de fractionnement est une liaison distincte avec sa propre négociation ; le commutateur voit deux (ou quatre) ports. Le codage d’identité doit décrire l’ensemble de manière cohérente à chaque extrémité (Structure interne des câbles).

OSFP à ailettes ou plat

  • OSFP à ailettes — dissipateur thermique intégré pour les cages de commutateur avec flux d’air ouvert au-dessus du module. Ne s’insère pas dans une cage plate.
  • OSFP plat — pour les HCA et les cages avec un dissipateur thermique flottant. S’insère dans les deux types de cage, mais peut chauffer dans une cage de commutateur ouverte.
  • QSFP112 sur les HCA partage l’interface électrique NDR à 4 × 106 Gb/s dans un encombrement QSFP ; un port HCA QSFP112 s’associe à un câble fractionné depuis un commutateur OSFP.

Conséquences thermiques : Alimentation et thermique.

Règles mécaniques

RèglePourquoi
Respecter le rayon de courbure (DAC ≥ 10× le diamètre ; AOC/fibre ≥ 30 mm)twinax écrasé → erreurs de voie ; fibre pliée → perte Rx
Soutenir le poids du câble — les DAC double port sont lourdstire sur la cage, contact intermittent, cartes paddle fissurées
À broches/sans broches et APC sur chaque MPOÉclatement et câblage MPO
Nettoyer et inspecter chaque MPO avant insertionune particule coûte 1–3 dB à une voie
Garder les caches anti-poussière sur les cages et connecteurs inutilisésla contamination est la première cause de pannes de voie
Acheminer à l’écart des sorties d’air chaudles moteurs AOC et les connecteurs AEC vieillissent avec la température

Identité et politique constructeur

Les commutateurs et HCA InfiniBand du constructeur dominant valident les câbles et transceivers par rapport à une liste supportée et lisent leurs informations de câble (constructeur, PN, SN, longueur, technologie) dans le fabric manager. Un câble non validé peut se lier à débit réduit ou être signalé ; un câble codé avec une longueur ou une classe de débit erronée peut échouer la négociation. Les octets d’identité sont les champs standards SFF-8636/CMIS plus les déclarations de débit InfiniBand (Codes de conformité, Verrouillage constructeur).

Pratique d’inventaire

  • Étiquetez les deux extrémités avec la liaison (commutateur/port ↔ hôte/port) ; les câbles fractionnés ont besoin d’étiquettes par branche.
  • Enregistrez le constructeur, le PN, le SN et la longueur de chaque câble dans le fabric manager ou la CMDB ; récupérez les données depuis mlxcables ou depuis CodingBox à la réception.
  • Gardez des pièces de rechange par classe de portée et connecteur ; les variantes NDR double port et fractionnées ne sont pas interchangeables avec du 400G simple.
  • Effectuez un rodage des nouvelles optiques avant déploiement (Fiabilité et surveillance des liaisons).

Dans CodingBox

Les extrémités de câble et les transceivers se lisent comme n’importe quel module : identité avec longueur de câble, technologie et classe de débit, DDM par voie pour AOC et optiques, état CMIS pour les modules NDR (Check transceiver, DDM). Lire chaque branche d’un câble fractionné avant l’installation permet de détecter l’extrémité mal assortie qui, sinon, se lierait à la mauvaise vitesse.

Les modules de génération XDR en détail : OSFP224 et OSFP-XD.

Comment les HCA et les pilotes NIC valident ces câbles, et les outils qui montrent le résultat depuis l’hôte : Compatibilité des transceivers sur les NIC, Outils et diagnostics NIC.


Si vous trouvez une inexactitude ou une erreur dans cet article, sélectionnez le passage concerné et appuyez sur Ctrl+Enter pour .