GLOBALfiber datasenterkurs · Del 2 av 13

Ethernet, InfiniBand og plattformer

Ethernet og InfiniBand har ulike protokoller og krav til porter og kabler. Switch, server, NIC, HCA, programvare og linkmodus må støtte den valgte forbindelsen.

Fra GLOBALfibers datasenterkompendium, side 7–12. Åpent kurs med illustrasjoner og lesbar tekst. Produktvalg kontrolleres mot datablad og aktuell plattform.

Ethernet og InfiniBand

Ethernet og InfiniBand – GLOBALfiber datasenterkurs, side 7
GLOBALfiber datasenterkurs · Side 7. Trykk på siden for større visning.
Les innholdet som tekst

Begge brukes i datasentre, men de har ulike protokoller, styringsmekanismer og krav til endepunktene.

EgenskapEthernetInfiniBand
BruksområdeTjenester, lagring, AI og generelt nettHPC og AI-klynger
ServeradapterEthernet NIC eller DPUHCA med InfiniBand-støtte
RDMABlant annet RoCEv2Del av InfiniBand-arkitekturen
DriftEthernet/IP-verktøy og køstyringFabric-styring og subnet manager
Kabel / optikkRiktig Ethernet-profil og portstøtteRiktig IB-generasjon og portstøtte

Samme formfaktor og nominelle hastighet gir ikke automatisk støtte for begge protokoller.

InfiniBand 100–800G

InfiniBand 100–800G – GLOBALfiber datasenterkurs, side 8
GLOBALfiber datasenterkurs · Side 8. Trykk på siden for større visning.
Les innholdet som tekst

Generasjonsnavnet beskriver linkteknologien. Tabellen viser vanlige nominelle hastigheter for en 4X-link.

PORTBREDDE BETYR NOE

NDR200 bruker to 100G-lanes. En modul merket 800G kan også inneholde to separate NDR 400G-grensesnitt. Dette er forskjellig fra én XDR 800G-link.

GENERASJONSSKIFTE

Kontroller støttet hastighet, portbredde, kabel og firmware når generasjoner blandes.

GenerasjonLinkLane-oppsett
EDR100G4 × 25G
HDR200G4 × 50G
NDR400G4 × 100G
XDR800G4 × 200G

Hastighetene er nominelle. Elektrisk baudrate, linjekoding og nyttelast er forskjellige størrelser.

RDMA og RoCEv2

RDMA og RoCEv2 – GLOBALfiber datasenterkurs, side 9
GLOBALfiber datasenterkurs · Side 9. Trykk på siden for større visning.
Les innholdet som tekst

RDMA lar nettverksadapteren overføre data med redusert CPU-arbeid. RoCEv2 transporterer RDMA over UDP/IP i Ethernet.

NETTVERKET MÅ KONFIGURERES

Ytelsen avhenger av køer, trafikkklasser og kontroll av overbelastning. ECN og eventuelt PFC inngår i plattformens anbefalte design. PFC krever bevisst konfigurasjon og overvåking.

DET FYSISKE LAGET

Riktig optikk og feilfri kabling er nødvendig, men forklarer ikke alle ytelsesproblemer. Pakkeproblemer og køtrykk må undersøkes selv om linken står oppe.

Hold lagringsnett, GPU-nett og administrasjon tydelig dokumentert. Bruk anbefalt oppsett for den aktuelle plattformen.

Switcher og servere

Switcher og servere – GLOBALfiber datasenterkurs, side 10
GLOBALfiber datasenterkurs · Side 10. Trykk på siden for større visning.
Les innholdet som tekst

Bruk produsentfamiliene til å finne riktig dokumentasjon. Valget av modul avgjøres på modell- og portnivå.

PlattformEksempler i kursetKontrollpunkt
NVIDIAQuantum, Spectrum, ConnectX, BlueFieldProtokoll, lane-oppsett og kjøling
AristaEthernet leaf–spineModell, EOS, breakout og optikk
JuniperQFXModell, Junos og portstøtte
CiscoNexusModell, NX-OS og optikkstøtte
SupermicroServere med NIC / HCAAdapter, PCIe, firmware og luftstrøm

Produsentnavn er ikke en kompatibilitetsbekreftelse. Slå opp konkret maskinvare og programvare.

NIC, HCA og DPU

NIC, HCA og DPU – GLOBALfiber datasenterkurs, side 11
GLOBALfiber datasenterkurs · Side 11. Trykk på siden for større visning.
Les innholdet som tekst

Adapteren bestemmer hvordan serveren møter nettverket. Serverens front eller bakside kan ha flere ulike porttyper.

SUPERMICRO SOM EKSEMPEL

Samme serverfamilie kan leveres med ulike adaptere. Produktkoden AOC i et Supermicro-kortnavn må ikke forveksles med Active Optical Cable.

BegrepOppgaveKontroller
NICNettverksadapter, ofte EthernetPortmodus, driver, firmware
HCAVertsadapter for blant annet InfiniBandIB-generasjon, portbredde, protokoll
DPUProsessor og nettverk med avlastningsfunksjonerProgramvare, nettverksmodus, optikk
PCIe / I/OForbindelsen inn i serverenGenerasjon, banebredde, CPU-tilknytning

Høy nettverkshastighet garanterer ikke samme gjennomstrømning i applikasjonen. PCIe, minne og programvare kan begrense ytelsen.

Kompatibilitetskort

Kompatibilitetskort – GLOBALfiber datasenterkurs, side 12
GLOBALfiber datasenterkurs · Side 12. Trykk på siden for større visning.
Les innholdet som tekst

Ett kontrollkort per forbindelse gir et konkret grunnlag for bestilling og testing.

RegistrerEksempel på opplysning
Endepunkt A og BModell, portnummer, adapter og porttype
ProgramvareSwitch-OS, driver og firmwareversjon
LinkmodusEthernet / IB, hastighet, breakout og FEC
Modul / kabelVarenummer, revisjon, lengde og koding
MiljøEffektklasse, kjøleutførelse og temperatur
TeststatusLeverandørspesifikasjon / egen test / ikke verifisert

Leverandørens kompatibilitetsliste og GLOBALfibers egen validering er ulike dokumentasjonsgrunnlag. Oppgi hvilket grunnlag resultatet bygger på.

Opphavsrett og bruk

© 2026 GLOBALfiber AS

GLOBALfiber AS forbeholder seg rettighetene til eget opphavsrettslig beskyttet innhold og den originale sammenstillingen i dette kurskompendiet.

Kompendiet kan leses og lastes ned til egen læring. Utover bruk som er tillatt etter loven, krever viderepublisering, bearbeiding, distribusjon og bruk i eksterne kurs skriftlig tillatelse fra GLOBALfiber AS.

Lovlig sitat med kildeangivelse er tillatt. Del gjerne lenken til kurset på www.globalfiber.no.

Bilder, illustrasjoner og annet materiale fra tredjeparter tilhører de respektive rettighetshaverne og omfattes av deres bruksvilkår.