Viden

Datacenteropdeling adskiller computer, hukommelse, lagring og netværk i uafhængige, poolede ressourcer i stedet for at låse dem inde i faste servergrænser. Denne adskillelse skaber en ny arkitektonisk afhængighed: sammenkoblingslaget mellem disse puljer skal levere nok båndbredde, lav nok latency og tilstrækkelig rækkevidde til at få hele systemet til at opføre sig som én koordineret struktur. Optisk sammenkobling er den transportteknologi, der i stigende grad udfylder denne rolle -, især hvor kobberforbindelser rammer fysiske grænser for afstand, effekt og signalintegritet.

Denne artikel forklarer, hvordan optisk sammenkobling understøtter disaggregerede arkitekturer, hvor den udkonkurrerer kobber, hvordan den relaterer til CXL og co-pakket optik, og hvornår det giver praktisk mening at anvende.

Hvad er datacenteropdeling?

I en traditionel server-centreret model er CPU, hukommelse, lagring og netværk samlet i et enkelt chassis. Du køber en server, og du får et fast forhold på alle fire -, uanset om din arbejdsbyrde har brug for dette forhold eller ej. Datacenterdisaggregering skiller denne bundt fra hinanden. Hver ressourcetype er organiseret i sin egen pulje, og arbejdsbelastninger trækker kun det, de har brug for, fra hver pulje over en delt struktur.

Dette betyder noget, fordi moderne arbejdsbyrder sjældent er afbalanceret. Et stort træningsjob for sprogmodeller kan mætte GPU-hukommelse og øst-vest-båndbredde, mens det næsten ikke berører lokal lagring. En analysepipeline i realtid kan have brug for massiv hukommelseskapacitet, men kun moderat beregning. I et server-centreret design fører denne uoverensstemmelse til ressourcestranding: inaktive CPU-cyklusser, der sidder sammen med opbrugt hukommelse, eller lagerkapacitet, som ingen arbejdsbyrde bruger.

DeOpen Compute Project (OCP)har drevet disaggregerede rackdesigns siden midten af ​​2010'erne, og hyperscalere som Meta og Microsoft har implementeret disaggregeret lagring og netværk i stor skala. Fremkomsten afCompute Express Link (CXL)har udvidet denne vision til hukommelsesopdeling, hvilket gør arkitekturen mere og mere praktisk til en bredere vifte af miljøer.

Hvorfor traditionelle server-centrerede design rammer en væg

To kræfter presser infrastrukturhold mod opdeling: udnyttelsestryk og båndbreddetryk.

På udnyttelsessiden skaber faste serverbundter affald i stor skala. Industriforskning tyder på, at omkring 25 % af DRAM-kapaciteten i konventionelle servere i gennemsnit forbliver ubrugt, selv om hukommelsen tegner sig for næsten halvdelen af ​​de samlede serveromkostninger. Multipliceret på tværs af tusindvis af noder repræsenterer den strandede kapacitet en betydelig kapital- og strømbyrde.

På båndbreddesiden genererer AI-træningsklynger og-højtydende analyser trafikmønstre, der adskiller sig markant fra traditionelle nord-sydlige web-servere. Disse arbejdsbelastninger producerer tung øst-vest trafik - GPU-til-GPU, accelerator-til-hukommelse og node-til-node - på tværs af hundreder eller tusinder af endepunkter. Traditionelle server{14}centrerede topologier med korte kobberkørsler mellem faste bokse var ikke designet til det mønster. Efterhånden som linkhastigheder stiger fra 400G til 800G og derover, bliver de elektriske begrænsninger af kobber sværere at konstruere udenom.

Hvordan fungerer optisk sammenkobling i et opdelt datacenter?

Når computer-, hukommelses- og acceleratorressourcer sidder i separate puljer, bliver stoffet, der forbinder disse puljer, det ydeevne-kritiske lag. Optisk sammenkobling tjener dette lag ved at konvertere elektriske signaler til lys, transmittere data overenkelt-tilstandellermultimode fiber, og konvertere tilbage til elektrisk i den modtagende ende.

Fysikken i optisk transport giver det strukturelle fordele til dette job. Lyssignaler i fiber oplever langt mindre dæmpning pr. meter end elektriske signaler i kobber, hvilket betyder, at optiske links kan opretholde signalkvaliteten over længere afstande uden den strømkrævende-signalbehandling (retimere, DSP'er, equalizere), som kobber kræver ved højere hastigheder. Ved 800 Gbps er passiv kobber praktisk op til ca. 3-5 meter. Aktive elektriske kabler forlænger det til måske 7 meter. Optiske links spænder rutinemæssigt fra 100 meter til 2 kilometer med samme datahastighed, og sammenhængende optik kan nå titusvis af kilometer.

I en disaggregeret arkitektur er denne rækkeviddefordel ikke abstrakt. Det bestemmer direkte, hvor langt fra hinanden ressourcepuljer kan sidde, mens de stadig opfører sig som et samlet system. Specifikt:

• Inden i stativet:Kobber dominerer stadig for meget korte forbindelser - server-to-top-of-rack switch, GPU-to-GPU in a tray. Ved afstande under 2-3 meter er kobber enklere, billigere og lavere{10}}forsinkelse.
• Reol-til-reol (2-100 m):Det er her optisk sammenkobling bliver den praktiske standard ved 400G og derover. Tilslutning af et computerrack til en hukommelsespool i et tilstødende rack eller sammenkobling af GPU-bakker på tværs af en række kræver typisk den båndbreddetæthed og rækkevidde, som fiberen giver.Fiberoptiske kabelsamlingerogMPO/MTP-forbindelseer standard for disse stier.
• Rum-til-rum og bygning-til-bygning (100 m–10+ km):Kun optisk transport er levedygtig ved disse afstande og hastigheder. Dette omfang har betydning for campus-skalaopdeling, hvor lagerpuljer, backupberegnings- eller katastrofe--gendannelsesressourcer sidder i separate bygninger.

Optisk sammenkobling vs kobber i opdelte datacentre

Valget mellem optisk og kobber er ikke binært - det er scope-afhængigt. Her er, hvordan de to sammenligner på tværs af de faktorer, der betyder mest i et adskilt design:

Den praktiske takeaway: Brug kobber, hvor den korte-simpelhed stadig vinder. Brug optisk, hvor rækkevidde, båndbreddetæthed, strømeffektivitet eller kabelstyring bliver den bindende begrænsning. I et adskilt miljø vokser den optiske andel af den samlede sammenkobling, fordi arkitekturen i sig selv skaber længere, højere-båndbreddestier mellem adskilte ressourcepuljer. For en dybere sammenligning af medietyper, sefiberoptiske vs kobberkabler: hvilket er det rigtige til din installation.

Vigtigste fordele ved optisk sammenkobling til disaggregering

Højere båndbreddetæthed for adskilte ressourcepuljer

Disaggregering øger mængden af ​​trafik, der krydser sammenkoblingslaget, fordi ressourcer, der engang var-samplaceret nu, kommunikerer over strukturen. Optisk fiber understøtter dette behov med højere per-fiberbåndbredde og flere fibre per kabel. En enkeltbånd fiberkabelkan bære hundredvis af fibre i et kompakt- tværsnit, hvilket muliggør den form for porttæthed, som disaggregerede GPU-klynger og hukommelsespuljer kræver.

Lavere effekt og termisk belastning i skala

Strømeffektivitet betyder mere i et adskilt design, fordi sammenkoblingslaget bærer en større andel af den samlede systemtrafik. Ved 800G og derover kræver kobberlinks over moderate afstande strøm-intensiv DSP-behandling i begge ender. Optiske links ved tilsvarende hastigheder og afstande bruger mindre strøm pr. bit. NVIDIAs tekniske dokumentation om dens sam-pakkede optikomskiftningsplatform rapporterer en3,5× reduktion i strømforbrugsammenlignet med traditionelle stikbare transceivere. På datacenterskala udmønter denne forskel sig direkte i lavere elregninger og reduceret køleinfrastruktur.

Modulær, uafhængig skalering

Et af de centrale løfter om disaggregering er, at computer, hukommelse og lagring kan skaleres med forskellige hastigheder. Optisk sammenkobling understøtter dette løfte, fordi tilføjelse af kapacitet til én ressourcepulje ikke kræver omdesign af hele stoffet.Stikbare optiske modulerkan opgraderes eller tilføjes trinvist - fra 400G til 800G til 1,6T - uden at ændre den underliggende fiberfabrik.

Fleksibilitet til heterogene arbejdsbyrder

Når ressourcer samles og forbindes gennem en højtydende optisk struktur, kan infrastrukturteams tildele ressourcer til arbejdsbelastninger dynamisk i stedet for at forme arbejdsbelastninger omkring faste serverkonfigurationer. Denne fleksibilitet er især værdifuld i miljøer, hvor AI-træningsjob, realtidsinferens, analysepipelines og-lagringstunge applikationer eksisterer side om side og konkurrerer om forskellige ressourcetyper.

Hvordan Optical Interconnect relaterer til CXL og Co-Packed Optics

CXL: protokollaget til hukommelse og ressourcedeling

CXL (Compute Express Link) og optisk sammenkobling løser forskellige dele af opdelingsproblemet. CXL er en åben standardprotokol - bygget på det fysiske PCIe-lag -, der muliggør cache-kohærent kommunikation mellem CPU'er, hukommelsesenheder og acceleratorer. Den definerer, hvordan adskilte ressourcer kan samles og deles effektivt på software- og protokolniveau.

CXL-konsortiet, hvis medlemmer omfatter Intel, AMD, NVIDIA, Samsung, Microsoft, Google og Meta, udgav CXL 3.1 i november 2023 med eksplicit støtte tilskift på flere-niveauer og strukturbaseret-opdelingud over stativet. CXL 3.0 introducerede understøttelse af op til 4.096 noder i et samlet stof, hvilket muliggør rack-skalering og potentielt klyngeskala-hukommelsespooling.

Optisk sammenkobling er den fysiske transport, der kan transportere CXL-trafik (og andre protokoller) mellem disse distribuerede noder. Et team, der evaluerer CXL-baseret hukommelsespooling og et team, der evaluerer optisk sammenkobling, arbejder ofte på det samme opdelingsinitiativ fra forskellige vinkler -, hvor den ene adresserer protokol- og ressource--delingslogikken, den anden adresserer den fysiske transport.

Sam-pakket optik: skubber optisk tættere på chippen

Co-packaged optics (CPO) går videre ved at integrere optiske motorer direkte på det samme pakkesubstrat som switch-ASIC eller GPU, i stedet for at stole på separate pluggbare transceivere, der er forbundet via elektriske spor på et frontpanel. Dette eliminerer de længste og mest strømkrævende-elektriske veje i systemet.

Ved GTC 2025 annoncerede NVIDIA sin førsteco-pakkede siliciumfotonik-omskiftningsplatforme(Quantum-X Photonics og Spectrum-X Photonics), der leverer op til 409,6 Tb/s båndbredde med 512 porte ved 800 Gb/s. NVIDIAs administrerende direktør Jensen Huang bemærkede, at skalering til en million GPU'er ved hjælp af konventionelle pluggbare transceivere ville forbruge omkring 180 MW i transceivereffekt alene - et uholdbart tal, som CPO er designet til at adressere.

CPO er ikke noget, hvert team, der evaluerer disaggregering, skal implementere i dag. Pluggbare optiske moduler forbliver den dominerende formfaktor for de flestedatacenter fiberoptiskimplementeringer og vil fortsætte med at være gennem mindst slutningen af ​​2020'erne. Men CPO repræsenterer retningen for den optiske køreplan, og teams, der planlægger store AI-klynger eller næste-generations opdelte stoffer, bør følge dens modenhed nøje.

Hvornår giver optisk sammenkobling mest mening?

AI og accelerator-tunge miljøer

AI-træningsklynger er blandt de stærkeste use cases for optisk sammenkobling i en adskilt kontekst. Disse systemer genererer massiv øst-vesttrafik på tværs af GPU-til-GPU og GPU-til-hukommelsesstier. Efterhånden som klyngestørrelser vokser fra hundredvis til tusindvis af GPU'er, overstiger rækkevidde- og båndbreddekravene hurtigt, hvad kobber kan understøtte. I NVIDIAs GB200 NVL72-arkitektur repræsenterer netværksomkostninger (inklusive optiske transceivere) for eksempel 15-18% af de samlede klyngeomkostninger, og optiske transceivere tegner sig for omkring 60% af disse netværksomkostninger. Økonomien og ydeevnen til optimering af det optiske lag er væsentlig.

Hukommelsespooling og komponerbar infrastruktur

Hvis dit team evaluerer CXL-baseret hukommelsespooling, skal det fysiske transportlag understøtte denne adskillelse uden at tilføje uacceptabel forsinkelse eller begrænsende skala. CXL 3.1 retter sig eksplicit mod struktur-skalaopdeling ud over racket, hvilket betyder, at sammenkoblingsstier vil strække sig over længere afstande end traditionelle intra-serverhukommelsesbusser. Optiske links er den naturlige pasform til disse stier.

Store-miljøer med ujævne skaleringsbehov

Optisk sammenkobling giver også mere mening, når computer, hukommelse og lager skal skaleres med forskellige hastigheder. Hvis din computerkapacitet vokser 3× om året, men lagerpladsen vokser 1,5×, giver en disaggregeret arkitektur dig mulighed for at udvide hver pool uafhængigt -, og optisk sammenkobling gør det fysisk muligt uden at redesigne kabelanlægget hver gang.

Når det IKKE giver mening

Optisk sammenkobling er ikke det rigtige udgangspunkt for ethvert miljø. Hvis dit datacenter primært kører afbalanceret, generelle-arbejdsbelastninger på konventionelle servere, og din rack-til-trafik er beskeden og vel-betjent af eksisterende kobberinfrastruktur, er omkostningerne og kompleksiteten af ​​en optisk-første struktur muligvis ikke retfærdiggjort. Tilsvarende, hvis du opererer i en skala, hvor et par dusin servere opfylder dine behov, kan opdelingen i sig selv introducere mere operationel kompleksitet, end den sparer. Arkitekturen betaler sig, når skala, heterogenitet og ressourceubalance er reelle og målbare - ikke hypotetiske.

Hvad skal evalueres før implementering

1. Kortlæg din faktiske flaskehals

Start med et klart spørgsmål: hvad er den bindende begrænsning? Er det rækkevidde (kobberstier for korte til dit racklayout)? Båndbreddetæthed (ikke nok gennemløb pr. kabel til at fodre din GPU-klynge)? Strøm (elektriske links, der forbruger for meget watt ved 400G+)? Ressourceudnyttelse (servere overprovisioneret på én akse og sultet på en anden)? Optisk sammenkobling er mest værdifuld, når flaskehalsen er fysisk og målbar, ikke når den er vedtaget som en generel moderniseringsgest.

2. Evaluer de samlede systemomkostninger, ikke kabelomkostninger

En almindelig fejl er at sammenligne prisen på et kobberkabel med prisen på etoptisk kabeli isolation. Den sammenligning er misvisende. Den meningsfulde sammenligning inkluderer strømforbrug, termisk overhead (og de køleomkostninger, det skaber), porttæthed pr. rackenhed, anvendelig rækkevidde, opgraderingsfleksibilitet og omkostningerne ved strandede ressourcer i den bredere arkitektur. I mange opdelte miljøer ved 400G og derover er fibers samlede ejerskabsomkostninger lavere end kobber, når du tager højde for hele systemet.

3. Tjek kompatibilitet og driftsklarhed

Vurderetest af fiberoptiske kablerkrav, modulinteroperabilitet, overvågningsværktøjer og dit teams operationelle kendskab til fiber. Optiske moduler, der kan tilsluttes (OSFP, QSFP-DD) er godt-standardiseret og bredt understøttet, men dit driftsteam bør være fortrolig med fiberhåndtering, rengøring og fejlfinding, før du implementerer i stor skala. Overvej at starte med et pilotdomæne, hvor du kan validere disse operationelle faktorer.

4. Planlæg fiberanlæggets levetid

En væsentlig fordel ved fiberinfrastruktur er, at det passive fiberanlæg - kablerne, patchpanelerne og stierne - kan understøtte flere generationer af transceiverteknologi. Et godt-designetdatacenterforbindelsefiberanlæg installeret i dag til 400G kan understøtte 800G og 1.6T opgraderinger ved at bytte transceivere uden at trække nye kabler. Det gør den første investering i fiber mere forsvarlig over en 10-årig planlægningshorisont.

En praktisk adoptionsvej

Trin 1: Identificer ét begrænset domæne.Se efter det sted, hvor kobberrækkevidde, strøm, båndbreddetæthed eller ressourcestranding allerede skaber målbar smerte. Det kan være en GPU-klyngeudvidelse, en rack-til-flaskehals i et analysemiljø eller en hukommelsespooling-pilot.

Trin 2: Pilot og valider.Implementer optisk sammenkobling i det pågældende domæne. Mål latensadfærd, strømforbrug, driftskompleksitet og ekspansionsøkonomi i forhold til din eksisterende baseline.

Trin 3: Udvid baseret på beviser.Brug pilotdataene til at bygge den forretningsmæssige og tekniske case til en bredere anvendelse. Disaggregering og optisk migrering håndteres sjældent bedst som et enkelt big-bang-projekt. Fasevis udrulning giver dig mulighed for at lære, justere og opbygge organisatorisk tillid.

Beslutningstjekliste: Er Optical Interconnect det rigtige for dit disaggregeringsinitiativ?

• Overstiger dit rack-til-rack eller rum-til-rum linkafstande kobberets praktiske rækkevidde ved din målhastighed?
• Planlægger du at implementere 400G eller højere linkhastigheder på kort sigt?
• Er strømforbruget fra elektrisk sammenkobling ved at blive en meningsfuld del af dit datacenters energibudget?
• Evaluerer du CXL-baseret hukommelsespooling, komponerbar infrastruktur eller GPU-klyngeudvidelse?
• Er ressourcestranding (tomberegning, hukommelse eller lager låst inde i faste servere) et målbart omkostningsproblem?
• Har dit miljø brug for at skalere databehandling, hukommelse og lagring med forskellige hastigheder?

Hvis tre eller flere af disse gælder, fortjener optisk sammenkobling en seriøs evaluering som en del af din opdelingskøreplan.

FAQ

Hvad er optisk sammenkobling i et datacenter?

Optisk sammenkobling er en transportteknologi, der bruger lyssignaler overfiberoptiske kablerat transportere data mellem netværksenheder, servere, switche, lagersystemer og ressourcepuljer inden for og mellem datacentre. Det giver højere båndbredde, længere rækkevidde og lavere effekt pr. bit sammenlignet med kobber ved tilsvarende hastigheder -, hvilket gør det særligt vigtigt for disaggregerede og AI-orienterede arkitekturer.

Hvordan adskiller optisk sammenkobling sig fra CXL?

De opererer på forskellige lag. Optisk sammenkobling er en fysisk transportteknologi - den flytter bits fra punkt A til punkt B ved hjælp af lys. CXL er en protokolstandard, der definerer, hvordan CPU'er, hukommelse og acceleratorer kommunikerer sammenhængende. Optisk sammenkobling kan transportere CXL-trafik, men CXL kører også over elektriske forbindelser for korte-forbindelser. Teams evaluerer ofte begge dele samtidigt, fordi disaggregering skaber efterspørgsel efter både bedre protokoller (CXL) og bedre fysisk transport (optik).

Kan kobber og optisk eksistere side om side i et adskilt datacenter?

Ja, og det gør de typisk. De fleste opdelte miljøer bruger kobber til meget korte intra-rackforbindelser (under 3-5 meter), hvor det forbliver enklere og billigere, og optisk fiber til stativ-til-rack, række-til-række og længere stier, hvor kobberets rækkevidde, effekt og tæthed bliver bindende. Beslutningen er -afhængig af omfanget, ikke alt-eller-intet.

Hvad er co-pakket optik, og har jeg brug for det nu?

Co-packaged optics (CPO) integrerer optiske motorer direkte i den samme pakke som switch-ASIC eller processor, hvilket eliminerer behovet for separate pluggbare transceivere og reducerer strømforbrug og latens. NVIDIA og Broadcom implementerer CPO i næste-generations AI-netværksplatforme. De fleste datacentre har ikke brug for CPO i dag -stikbare optiske modulerforbliv standarden - men CPO er på køreplanen for stor-AI-infrastruktur i 2026-2028 tidsrammen.

Hvornår bør jeg IKKE forfølge disaggregering med optisk sammenkobling?

Hvis dine arbejdsbelastninger er godt-afbalanceret på tværs af computer, hukommelse og lager; din skala er beskeden (et par dusin servere); og din eksisterende kobberinfrastruktur håndterer dine nuværende og-nærmeste båndbreddebehov uden belastning -. Den ekstra kompleksitet af disaggregering og optisk migrering er muligvis ikke investeringen værd. Start med flaskehalsen, ikke buzzword.

Hvilke typer fiber bruges i datacenterets optiske sammenkobling?

Single-mode fiberbruges til længere-afstande, højere-links (typisk rack-to-rack og videre).Multimode fiberer almindeligt for kortere intra-data-forbindelser på op til et par hundrede meter. Valget afhænger af den nødvendige rækkevidde, hastighed og omkostningsprofil for hvert link.