Ottica e cavi InfiniBand · InfiniBand · Tecnologie · Documentazione · CodingBox
CodingBox Documentazione

Ottica e cavi InfiniBand

InfiniBand usa gli stessi alloggiamenti pluggable dell’Ethernet ad alta velocità, ma la scelta tra cavo e ricetrasmettitore — e la tolleranza verso i moduli di terze parti — segue regole proprie, plasmate dai cluster HPC e IA.

Cavo o ricetrasmettitore, per generazione

GenerazionePortaDAC in rameCavo ottico attivoRicetrasmettitore + fibra
EDR 100GQSFP28fino a ~3–5 mfino a 100 mSR4 (MPO-12 MMF), LR4
HDR 200GQSFP56fino a ~2 mfino a 100 mSR4/DR4
NDR 400GOSFP (twin-port 2×400G)~1–2 mlimitatoDR4/DR8 su MPO-12 APC monomodale

Lo schema: al crescere dei rate, la portata del rame passivo crolla e i fabric passano alle ottiche. A NDR la norma sono le ottiche DR monomodali con connettori MPO-12 APC — la levigatura angolata è obbligatoria, e mescolare APC con connettori UPC piatti è un errore di installazione comune.

OSFP twin-port

Le porte switch NDR sono comunemente OSFP twin-port: un modulo OSFP porta due collegamenti indipendenti da 400G (2×DR4), raddoppiando la densità del pannello frontale. Un dissipatore alettato integrato gestisce la potenza. Vedi OSFP.

Segnalazione e FEC

  • EDR: lane NRZ a 25G; HDR: PAM4 a 50G; NDR: PAM4 a 100G.
  • L’RS-FEC è obbligatorio da HDR in poi. Un mismatch di FEC, o un modulo che non annuncia il FEC atteso, è una causa frequente del «collegamento che non si allena mai».

Politica del produttore

I fabric InfiniBand sono dominati da un unico produttore di switch/NIC, e le piattaforme di quel produttore convalidano cavi e ottiche in base all’identità. Un modulo non riconosciuto può leggersi correttamente ma non riuscire a collegarsi, con uno stato del tipo «speed and type: Not supported» — vedi Blocco del produttore. Gli operatori tengono quindi scorte di ottiche qualificate e, dove si usano moduli di terze parti, li codificano con l’identità attesa.

Operare su larga scala

  • Migliaia di ottiche per cluster: anche un tasso di guasto annuo modesto significa un flusso costante di sostituzioni. Traccia il DDM per lane per individuare una lane in via di guasto prima che rallenti un’operazione collettiva.
  • La pulizia delle facce dei connettori MPO è la causa dominante dei flap — vedi Problemi CMIS per le specificità del 400G.

In CodingBox

CodingBox legge i moduli EDR/HDR secondo SFF-8636 e gli OSFP/QSFP-DD NDR secondo CMIS: identità, stato del modulo, DDM per lane e i campi di identità che determinano se un fabric accetterà il modulo.


Se trovi un’imprecisione o un errore in questo articolo, seleziona il passaggio corrispondente e premi Ctrl+Enter per .