Meta deelt open netwerkontwerp voor AI-clusters

Meta presenteert op OCP 2026 nieuwe open netwerkbouwstenen voor grote AI-clusters, van een vloeistofgekoeld switchrack met 102,4 Tbps tot verbindingen tussen datacenters, meldt het bedrijf.

Bij nieuwe AI-clusters verschuiven keuzes rond capaciteit, koeling en uitwisselbaarheid naar de netwerklaag en het switchbeheer. Dat raakt vooral cloudoperators, datacenterbouwers en systeemintegrators. Voor organisaties die AI via een API of SaaS inkopen, kondigt Meta geen prijs- of productwijziging aan.

IceCube maakt de netwerkhardware concreet

Meta noemt IcePack zijn eerste vloeistofgekoelde netwerkrek. De IceCube-switchbladen leveren elk 102,4 Tbps aan niet-blokkerende capaciteit via 128 verbindingen van 800 Gbps. Meta biedt twee varianten in zijn eigen infrastructuur: een met Broadcoms Tomahawk 6C en een met Nvidia’s Spectrum 6. Beide draaien op Meta’s open FBOSS-netwerkbesturingssysteem, dat de OCP Switch Abstraction Interface gebruikt. Het bedrijf zegt dat de nieuwe generatie tweemaal zoveel bandbreedte biedt als zijn eerdere 51,2T-platformen.

Voor de verbindingen tussen GPU’s introduceert Meta Flattened Planar Fabric. Elke GPU krijgt acht onafhankelijke verbindingen van 100 gigabit naar acht afzonderlijke switches, één voor elk netwerkvlak. Daarmee vervangt Meta de uplinkarchitectuur met één vlak uit zijn eerdere ontwerp. De fabric gaat volgens Meta van drie naar twee schakellagen. Dat scheelt netwerkhops; de netwerkkaart verdeelt pakketten over de acht vlakken en hosts kunnen verkeer omleiden als een vlak uitvalt. Meta ontwikkelt dit ontwerp samen met Nvidia en werkt met cloudpartners aan standaardisatie.

De fabric reikt tot buiten het datacenter

Meta koppelt met Backend Aggregation afzonderlijke AI-netwerken tussen gebouwen, campussen en regio’s via een centrale Ethernet-super-spine. Het bedrijf noemt tientallen petabits per seconde tussen regio’s. Meta noemt Prometheus op ongeveer één gigawatt in 2026 en Hyperion als project dat richting vijf gigawatt groeit.

Lossless Ethernet vraagt meer buffergeheugen naarmate kabels langer zijn. Meta meet daarom de werkelijke kabellengte en stemt de buffer daarop af, in plaats van elk pad op de slechtste afstand te dimensioneren. Bij een gedeeltelijk uitgevallen verbinding verdelen capaciteitsignalen het verkeer; demping voorkomt routewisselingen. Cloudpartners draaien Meta’s point-to-point- en collectieve benchmarks op tientallen tot meer dan duizend GPU’s voordat een cluster wordt overgedragen.

Ook voor Nederlandse operators is de fysieke grens concreet. De Dutch Data Center Association meldt dat netcongestie en vergunningen de groei remmen terwijl AI de vraag naar rekenkracht opvoert. Dit komt terug in beperkingen rond netcapaciteit, ruimte en maatschappelijke druk bij Nederlandse datacenters. Meta noemt voor IcePack thermische efficiëntie, maar publiceert geen stroomverbruik of vergelijking waarmee een operator de benodigde aansluiting kan inschatten.

Meta bouwt de Ethernetlaag verder uit

Voor de verbindingen binnen een rack gebruikt Meta in zijn MTIA 300-systeem de Tahan-switch. Die Ethernet-switch heeft 51,2 terabit per seconde capaciteit. Vier Tahan-switches verbinden zestien accelerators in een niet-geblokkeerde opstelling. Meta zegt dat Tahan al in zijn MTIA 300-platform wordt geleverd en noemt 6,4 terabit per seconde per accelerator. Een volgende generatie krijgt acht 216×400G-switches op 102,4T-silicium om 72 accelerators per rack te verbinden. Meta wil in een latere versie OCP’s Ethernet for Scale-Up Networking, kortweg ESUN, als datavlak gebruiken.

ESUN en OSPA vullen verschillende delen van de stapel in. ESUN richt zich op het netwerkverkeer tussen accelerators. De OCP-specificatie ESUN 1.0 verscheen in maart en telt inmiddels meer dan 175 deelnemende organisaties, tegenover twaalf oprichters bij de start in 2025. De specificatie vervangt de gebruikelijke IP- en UDP-koppen van 28 tot 48 bytes door een kop van vier bytes voor kleine berichten.

Meta noemt ook open broncode voor MetaRoCE, zijn Ethernet-transport voor AI-netwerken, en werk aan FBOSS waarmee leveranciers hun switchplatformen zelfstandig kunnen aansluiten. Die software maakt het netwerkbesturingssysteem toegankelijker. De standaardisatie van hardwarebeheer die OSPA beoogt, zit daaronder.

OSPA is ingediend, maar nog in review

Meta zegt dat het OSPA-initiatief samen met Microsoft en Alibaba wordt geleid en dat versie 1.0 bij OCP is ingediend. OCP omschrijft de bijdrage zelf als werk in uitvoering: conceptversie 1.0.0 staat nog ter beoordeling door de Foundation. Het document richt zich op zeven gebieden, waaronder stroombeheer, hardware-inventaris, omgevingsmetingen, firmwareherstel, diagnose en beveiliging. Routering en pakketverwerking vallen buiten de scope. De status is dus een ingediende kandidaat, geen goedgekeurde standaard.

Dat onderscheid tussen lagen wordt concreet naast Cornelis’ Active Compute Fabric, een interconnect voor AI-clusters. Cornelis beschrijft die als een open scale-up- en scale-outarchitectuur met programmeerbare rekenkracht in de fabric. Het is een afzonderlijke aankondiging over transport en compute in de fabric; OSPA standaardiseert hoe switches hun hardware beheren. Beide passen in een bredere beweging waarin partijen delen van de AI-netwerkstack uit de leveranciersspecifieke hoek proberen te halen.

Meta’s cijfers en prestatieclaims komen uit het eigen engineeringblog. De publicatie geeft geen onafhankelijke metingen van latentie, energieverbruik of totale kosten, en vermeldt geen prijs of algemene leverdatum voor IcePack en IceCube. Ook noemt OCP geen datum waarop de review van OSPA wordt afgerond. De schaalcijfers tonen dus wat Meta bouwt en nastreeft, niet wat een andere operator vandaag kan bestellen of behalen.

De volgende stap ligt bij de formele review en de leveranciers die OSPA in concrete platformen verwerken. ESUN laat zien dat OCP een netwerkstandaard al tot versie 1.0 kan brengen met brede deelname; voor OSPA moet die gezamenlijke specificatie nog uit de beoordelingsfase komen. Pas bij implementaties worden de beloofde kortere onboarding en herbruikbare beheerlaag meetbaar. Voor Nederlandse cloud- en datacenterbouwers komt de keuze daarmee dichter bij de vraag welke delen van hun netwerk straks tussen leveranciers overdraagbaar zijn.