Okablowanie IB według generacji: DAC, AOC, transceivery, kable dzielone · InfiniBand · Technologie · Dokumentacja · CodingBox
CodingBox Dokumentacja

Okablowanie IB według generacji: DAC, AOC, transceivery, kable dzielone

Klaster InfiniBand okablowuje się według klasy zasięgu: miedź tam, gdzie przełącznik jest w zasięgu ręki, miedź aktywna nieco dalej, aktywne kable optyczne do sąsiedniego rzędu, transceivery ze światłowodem strukturalnym na resztę przypadków. Każda generacja przesuwała te granice bliżej i zmieniała złącze, a NDR dodał moduły dwuportowe i kable dzielone, które dezorientują instalatorów bez doświadczenia. Ta strona to materiał referencyjny okablowania — zasięgi, złącza, konfiguracje podziału, zasady mechaniczne oraz zasady dotyczące danych identyfikacyjnych.

Złącza według generacji

GeneracjaPrzepływność na linięPort 4xZłączeUwagi
SDR / DDR2,5 / 5 Gb/s10 / 20 Gb/sCX4 (miedź), później QSFPstarsze rozwiązanie
QDR10 Gb/s40 Gb/sQSFPzarządzanie SFF-8436
FDR14,06 Gb/s56 Gb/sQSFP+ (klasy FDR)64B/66B; FEC opcjonalny
EDR25,78 Gb/s100 Gb/sQSFP28ta sama optyka co 100G Ethernet, inne kodowanie
HDR53,1 Gb/s PAM4200 Gb/sQSFP56splittery 1:2 do HDR100
NDR106 Gb/s PAM4400 Gb/sOSFP dwuportowy (2 × 400G na moduł) w przełącznikach; OSFP albo QSFP112 w HCA800G na klatkę przełącznika
XDR212 Gb/s PAM4800 Gb/sOSFP / OSFP-XD1.6T na klatkę przełącznika

Szczegóły formatów obudowy: QSFP28, QSFP56, OSFP, QSFP112.

Klasy zasięgu

MediumQDRFDREDRHDRNDRUwagi
Pasywny DAC≤ 7 m≤ 3–5 m≤ 3 m≤ 2 m≤ 1,5–2 mzasięg maleje z każdą generacją; grubszy przekrój dla dłuższych odcinków
Miedź aktywna (ACC/AEC)—≤ 5 m≤ 5 m≤ 3–4 m≤ 3 mzasilane wtyczki; AEC z retimerami dla NDR
AOC≤ 100 m (niektóre 300)≤ 100 m≤ 100 m≤ 100 m≤ 30–50 m typowo850 nm VCSEL, wstążka MMF w środku
Transceiver klasy SR (MMF)≤ 300 m≤ 100–150 m≤ 70–100 m≤ 70–100 m≤ 50 m (VR) / 100 m (SR)OM3/OM4, MPO
Transceiver klasy DR/FR (SMF)——500 m – 2 km (PSM4, CWDM4)500 m – 2 km500 m (DR4) / 2 km (FR4)MPO-12 APC (DR4), duplex LC (FR4)

Co jest w środku każdego typu kabla: Wnętrze kabli.

Dwuportowe i dzielone kable NDR

Klatka przełącznika NDR mieści jeden moduł OSFP dwuportowy = dwa niezależne porty 400G za dwoma gniazdami MPO-12/APC (albo dwoma LC-duplex). Opcje okablowania z jednego modułu:

KonfiguracjaKabelDaleki koniec
2 × 400G prostedwie magistrale MPO-12 APCdwa porty 400G NDR HCA (OSFP albo QSFP112) albo kolejny przełącznik
Podział 1:2 (800G → 2 × 400G)kabel Y, jeden koniec OSFP, dwa końce OSFP/QSFP112dwa HCA — standardowe połączenie serwerowe
Podział 1:4 (800G → 4 × 200G)jeden koniec OSFP, cztery końce QSFP56/QSFP112HCA o szybkości HDR (NDR200)
AOC dwuportowyjeden koniec OSFP dwuportowy, dwa końce OSFP/QSFP112do ~30–50 m
DAC dwuportowyjeden koniec OSFP, dwa końce≤ 1,5–2 m; ciężki — tylko wewnątrz szafy

Każda odnoga podziału to osobne łącze z własną negocjacją; przełącznik widzi dwa (albo cztery) porty. Kodowanie danych identyfikacyjnych musi spójnie opisywać cały zestaw na każdym końcu (Wnętrze kabli).

OSFP żebrowany kontra płaski

  • OSFP z żebrowanym wierzchem — zintegrowany radiator dla klatek przełączników z otwartym przepływem powietrza nad modułem. Nie pasuje do płaskiej klatki.
  • OSFP z płaskim wierzchem — dla HCA i klatek z radiatorem jezdnym. Pasuje do obu typów klatek, ale w otwartej klatce przełącznika może się przegrzewać.
  • QSFP112 w HCA współdzieli interfejs elektryczny NDR przy 4 × 106 Gb/s w formacie obudowy QSFP; port HCA QSFP112 łączy się z kablem dzielonym od strony przełącznika OSFP.

Konsekwencje termiczne: Moc i termika.

Zasady mechaniczne

ZasadaDlaczego
Zachowaj promień gięcia (DAC ≥ 10× średnicy; AOC/światłowód ≥ 30 mm)zgnieciony twinax → błędy linii; zgięty światłowód → utrata mocy Rx
Podpieraj ciężar kabla — dwuportowe DAC są ciężkieobciąża klatkę, przerywany styk, pęknięte paddle card
Wersja z kołkami/bez kołków oraz APC na każdym MPOBreakout i okablowanie MPO
Czyść i sprawdzaj każde MPO przed włożeniemjedna cząstka kosztuje linię 1–3 dB
Trzymaj zaślepki przeciwpyłowe na nieużywanych klatkach i złączachzanieczyszczenie to główna przyczyna awarii linii
Prowadź trasę z dala od gorącego wylotu powietrzapodzespoły optyczne AOC i wtyczki AEC starzeją się wraz z temperaturą

Dane identyfikacyjne i polityka producenta

Przełączniki i HCA InfiniBand od dominującego producenta walidują kable i transceivery względem listy wspieranych i wczytują ich informacje o kablu (producent, PN, SN, długość, technologia) do menedżera fabric. Niezwalidowany kabel może połączyć się z obniżoną szybkością albo zostać oznaczony; kabel zakodowany z błędną długością albo klasą przepływności może nie przejść negocjacji. Bajty danych identyfikacyjnych to standardowe pola SFF-8636/CMIS plus deklaracje przepływności InfiniBand (Kody zgodności, Blokada producenta).

Prowadzenie ewidencji

  • Oznacz oba końce łączem (przełącznik/port ↔ host/port); kable dzielone wymagają etykiet dla każdej odnogi.
  • Zapisuj producenta, PN, SN i długość dla każdego kabla w menedżerze fabric albo CMDB; pobieraj dane z mlxcables albo z CodingBox podczas kontroli wejściowej.
  • Trzymaj zapasy według klasy zasięgu i złącza; dwuportowe i dzielone warianty NDR nie są zamienne ze zwykłym 400G.
  • Wygrzewaj nową optykę przed wdrożeniem (Niezawodność łącza i monitorowanie).

W CodingBox

Końce kabli i transceivery odczytuje się tak samo jak każdy moduł: dane identyfikacyjne wraz z długością kabla, technologią i klasą przepływności, DDM dla poszczególnych linii w AOC i optyce, stan CMIS dla modułów NDR (Check transceiver, DDM). Odczytanie każdej odnogi kabla dzielonego przed instalacją wychwytuje niedopasowany koniec, który inaczej połączyłby się z niewłaściwą szybkością.

Moduły generacji XDR szczegółowo: OSFP224 i OSFP-XD.

Jak HCA i sterowniki NIC walidują te kable, oraz narzędzia, które pokazują wynik z poziomu hosta: Kompatybilność transceiverów w kartach NIC, Narzędzia i diagnostyka NIC.


Jeśli znajdziesz nieścisłość lub błąd w tym materiale, zaznacz odpowiedni fragment i naciśnij Ctrl+Enter, aby .