Zusammenfassung

  • Das Energy Sciences Network, üblicherweise ESnet genannt, ist eine wissenschaftliche Netzinfrastruktur des Office of Science des US-Energieministeriums, betrieben vom Lawrence Berkeley National Laboratory. Es ist kein kommerzieller Anbieter und kein unabhängiges Unternehmen, sondern eine für die Wissenschaft errichtete Bundesinfrastruktur.
  • ESnet6 umfasst rund 15.000 Meilen dedizierte Glasfaserinfrastruktur, optische Systeme, Paket-Routing, private Netzwerke, Verbindungen zu Clouds und Forschungsnetzen, Messwerkzeuge und programmierbare Dienste. Der Jahresbericht 2024 verzeichnete eine aggregierte Kapazität von 57 Tbit/s und ein jährliches Verkehrsaufkommen von 1,77 Exabyte, doch die Zahlen messen unterschiedliche Aspekte des Systems und bedeuten nicht, dass jedem Nutzer ein Pfad mit 57 Tbit/s zur Verfügung steht.
  • Einer der nachhaltigsten Beiträge von ESnet könnte sein End-to-End-Engineering-Modell sein. Science DMZ, perfSONAR, iperf3, OSCARS, SENSE, High-Touch und EJFAT befassen sich mit lokalen Systemen, Netzreservierungen, Telemetrie und Echtzeit-Datenbewegungen, die darüber entscheiden, ob die Backbone-Kapazität in nützliche wissenschaftliche Leistung umgesetzt wird.
  • Der nächste strategische Schritt ist nicht nur ein schnelleres Backbone. Die American Science Cloud, eine integrierte Forschungsinfrastruktur, die Planung von ESnet7, Echtzeit-Instrumenten-Streaming, drahtlose Feldnetze und die Steuerung von Quantennetzwerken deuten auf ein Netz hin, das unmittelbar an wissenschaftlichen Workflows beteiligt ist. Die Reifegrade variieren, und Planungen oder Demonstrationen sollten nicht als universelle Produktionsdienste dargestellt werden.

Ein Wissenschaftsnetz, kein Internet-Einzelhandelsanbieter

Am einfachsten versteht man ESnet, indem man einem wissenschaftlichen Datum folgt. Ein Detektor, Teleskop, Mikroskop oder eine Simulation erzeugt Informationen in einem Labor oder einer Forschungseinrichtung. Lokale Erfassungssysteme sammeln die Daten, Speicher- und Übertragungsserver bereiten sie für den Transport vor, und das Labornetz leitet sie an einen kontrollierten Perimeter. Von dort aus kann eine ESnet-Verbindung die Daten quer durch die Vereinigten Staaten, über den Atlantik, zu einem Supercomputer des Energieministeriums, durch ein Forschungs- und Bildungsnetz oder in eine kommerzielle Cloud führen.

Das Ergebnis kommt als analysierter Datensatz, Warnmeldung, Modell oder Entscheidung über den nächsten Schritt des Experiments zurück.

Keine einzelne Organisation kontrolliert diesen gesamten Weg. Das Instrumententeam, das Labornetz, das regionale Forschungsnetz, der Cloud-Anbieter, der internationale Partner und das Supercomputing-Zentrum können unterschiedlichen Betreibern gehören. ESnet stellt die missionsorientierte Langstreckenebene bereit und arbeitet mit den anderen Betreibern zusammen, damit der Pfad als ein System funktioniert.

Ein langsamer Speicherserver, ein überlasteter Campus-Link oder eine ungeeignete Firewall können die Kapazität eines schnellen nationalen Backbones zunichtemachen, während ein Ausfall von ESnet eine gut konzipierte lokale Einrichtung lahmlegen kann.

Auch die institutionelle Stellung ist spezifisch. ESnet ist eine Netzwerkeinrichtung des Office of Science des US-Energieministeriums, die hauptsächlich durch das Advanced Scientific Computing Research finanziert und beaufsichtigt und von der Scientific Networking Division des Lawrence Berkeley National Laboratory betrieben wird. Das Berkeley Lab selbst wird für das Energieministerium von der University of California im Rahmen eines Laborbetriebsvertrags verwaltet. ESnet hat keine identifizierbaren Aktionäre, Aktien, Unternehmensbewertung oder eigenständige kommerzielle Bilanz.

Es ist als bundesstaatliche wissenschaftliche Infrastruktur zu beschreiben, nicht als Unternehmen, das Netzwerkdienste verkauft.

Forscher kommen mit ESnet in der Regel indirekt in Kontakt. Sie nutzen ein Instrument, einen Supercomputer, einen Labordienst, eine Universitätsanbindung oder ein Kooperationsnetz, dessen Verkehr durch ESnet läuft. Die Einrichtung unterscheidet zwischen institutionellen Standortnutzern und Endnutzern und gibt an, dass sie einzelne Endnutzer nicht formell registriert oder verfolgt. Die im Jahresbericht 2024 genannte Zahl von über 30.000 organisatorischen Nutzern ist daher eine veraltete institutionelle Kennzahl und keine genaue Abonnentenzählung.

Dieses Betriebsmodell erklärt, warum Vergleiche mit konventionellen Netzbetreibern unvollständig sind. ESnet betreibt Routing, optischen Transport und Zusammenschaltungen, führt aber auch Anforderungsüberprüfungen durch, entwickelt Open-Source-Tools, baut experimentelle Dienste auf und hilft Standorten, End-to-End-Leistungsprobleme zu beheben. Ihr Produkt ist kein Einzelhandelsanschluss. Es ist die Fähigkeit, geografisch verteilte wissenschaftliche Einrichtungen als Komponenten einer einzigen gemeinsamen Maschine arbeiten zu lassen. (ESnet-Governance;Netzwerkdienste)

Die Geschichte beginnt mit knappen Computern und akustischen Modems

Die offizielle Geschichte von ESnet reicht bis in die Mitte der 1970er Jahre zurück, als sowohl Computer als auch Fernkommunikation knapp waren. Im Controlled Thermonuclear Research Computer Center des Lawrence Livermore National Laboratory schlossen Mitarbeiter einen geliehenen Control Data Corporation 6600 über vier akustische Modems an. Die Ausrüstung und die Geschwindigkeiten gehören einer anderen Zeit an, doch das betriebliche Problem ist weiterhin erkennbar: Eine spezialisierte wissenschaftliche Gemeinschaft benötigte Fernzugriff auf teure Rechenkapazität, die nicht an allen beteiligten Institutionen reproduziert werden konnte.

Unterschiedliche Forschungsgemeinschaften des Energieministeriums entwickelten Ende der 1970er und Anfang der 1980er Jahre ihre eigenen Netze. Hochenergiephysik und Fusionsforschung hatten unterschiedliche Einrichtungen, Mitarbeiter und Datenströme, und Vorläufernetze wie HEPnet und MFEnet spiegelten diese Grenzen wider. Zweckgebundene Netze waren sinnvoll, solange kommerzielle Dienste keine ausreichende Reichweite, Leistung oder betriebliche Aufmerksamkeit boten.

Gleichzeitig führten sie zu Doppelungen: Jedes Programm konnte Leitungen aushandeln, Technologien pflegen und Kompetenzen unabhängig entwickeln, was die Zusammenarbeit und längerfristige Aufrüstungen fragmentierte.

Die formelle Gründung von ESnet im Jahr 1986 konsolidierte diese Funktionen in einem breiteren Wissenschaftsnetz. Die Änderung war ebenso organisatorisch wie technisch. Eine gemeinsame Einrichtung konnte die Nachfrage mehrerer Programme vorhersagen, nationale Verbindungen betreiben, internationale Anschlüsse koordinieren und spezialisiertes Personal binden. Sie konnte zudem Kapazität von einer isolierten Projektsorge in einen Infrastrukturplan für das gesamte Ministerium verwandeln.

Das anfängliche Modell legte mehrere bis heute sichtbare Merkmale fest. Die Nutzer wurden durch die wissenschaftliche Mission definiert, nicht durch einen Einzelhandelsmarkt. Großrechner und Instrumente rechtfertigten gemeinsame öffentliche Investitionen. Die Netzgestaltung folgte langfristigen Forschungsprogrammen. Der Betrieb erforderte Fachleute, die sowohl Kommunikationssysteme als auch die wissenschaftlichen Konsequenzen eines Ausfalls verstehen. Die Nachfrage trat unregelmäßig auf, da ein einzelnes Experiment Verkehr weit über die übliche Grundlast erzeugen konnte.

Das Berkeley Lab hatte ebenfalls seine eigene Netzgeschichte. 1974 schloss es einen CDC 6600 an das ARPANET an, und Forscher des Labors trugen später zu grundlegenden Arbeiten über TCP-Überlastkontrolle bei. Die Arbeit von Van Jacobson und Mike Karels gehört zum weiteren Umfeld des Berkeley Lab und sollte nicht allein ESnet zugeschrieben werden. Die institutionelle Überlappung war jedoch wichtig: Sie brachte ein produktives Wissenschaftsnetz in die Nähe von Forschern, die Protokollverhalten, Messung und Leistung als ingenieurwissenschaftliche Probleme betrachteten, die untersucht werden konnten, und nicht als feste Bedingungen.

Der Betrieb wurde 1996 an das Berkeley Lab verlegt. Damit wurde der heutige Sitz neben dem National Energy Research Scientific Computing Center, Netzwerkforschern, Softwareingenieuren und anderen Programmen des Energieministeriums etabliert. Dies stärkte auch eine Kultur, in der eine Produktionseinrichtung und eine angewandte Forschungsorganisation Fachleute, Labore und technische Fragestellungen teilen. (Geschichte von ESnet)

Warum das Netz zu einer gemeinsamen wissenschaftlichen Einrichtung wurde

Eine gemeinsame wissenschaftliche Einrichtung existiert, weil einige Fähigkeiten zu teuer, zu spezialisiert oder zu eng miteinander verbunden sind, als dass jedes Forschungsteam sie selbst aufbauen könnte. Ein Teilchenbeschleuniger, eine Lichtquelle oder ein führender Supercomputer folgt dieser Logik. ESnet wendet dasselbe Prinzip auf die Kommunikation an. Langstrecken-Glasfaserrechte, optische Ausrüstung, Router, internationale Kapazität, Rund-um-die-Uhr-Betrieb, Cybersicherheit, Leistungsmessung und technischer Support werden in einer einzigen Einrichtung gebündelt, die mehrere Programme bedient.

Die Rechtfertigung für die öffentliche Finanzierung folgt der Form der wissenschaftlichen Nachfrage. Ein kommerzieller Anbieter kann eine Hochkapazitätsleitung verkaufen, definiert seine nationale Architektur jedoch normalerweise nicht um einen Detektor herum, der erst Jahre später in Betrieb gehen soll, um einen mit einer Supernova verbundenen Datenstrom, der vielleicht nie während der Vertragslaufzeit auftritt, oder um einen Workflow mit geringem Einzelhandelsvolumen, aber hohem öffentlichem Wert.

ESnet kann Kapazitäten aufbauen, bevor die Nutzung messbar ist, weil ihr Auftrag darin besteht, wissenschaftliche Fähigkeiten zu schaffen, nicht kurzfristige Netzeinnahmen zu erzielen.

Das Einrichtungsmodell verändert auch, wie die Nachfrage ermittelt wird. ESnet führt formelle Anforderungsüberprüfungen mit den Wissenschaftsprogrammen des Energieministeriums durch. Forscher und Einrichtungsmitarbeiter beschreiben Instrumente, Datenvolumen, Speicherstandorte, Rechenziele, Zeitanforderungen, Kooperationsmuster und lokale Engpässe über einen Horizont von fünf bis zehn Jahren. Diese Ergebnisse leiten die Kapazität der Standortverbindungen, die Routenvielfalt, die transatlantische Beschaffung, die Orchestrierungsforschung und das Dienstedesign.

Dieser Prozess ist weniger sichtbar als eine neue kohärente optische Verbindung, kann aber wichtiger sein. Eine Vereinbarung über Seekabelspektrum, der Kauf eines Routers oder ein zweiter physischer Zugang zu einem Standort können Jahre für Finanzierung und Implementierung benötigen. Zu warten, bis ein Experiment Daten produziert, würde vorhersehbare Infrastrukturanforderungen in Notfälle verwandeln. Anforderungsüberprüfungen wandeln wissenschaftliche Pläne in ingenieurtechnische Vorbereitungszeit um.

Die Überprüfungen machen auch Unsicherheit explizit. Prognosen können sich ändern, Instrumentenzeitpläne können sich verzögern, Datenreduktionssoftware kann sich verbessern, die Cloud-Nutzung kann steigen und eine Einrichtung kann ihren Workflow umgestalten. ESnet behandelt eine Fallstudie nicht als garantierte Verkehrsbestellung. Sie nutzt die Evidenz, um eine Bandbreite von Anforderungen aufzubauen und zu entscheiden, wo Flexibilität, Reservekapazität oder gestaffelte Einführung gerechtfertigt sind.

Das Modell vermeidet eine Abrechnung pro Gigabyte für jeden Wissenschaftler. Die Kernoperationen werden aus Bundesmitteln finanziert, während einige Standortverbindungskosten je nach Programmträgerschaft und der Site User Cost Policy verteilt werden können. Dies beseitigt keine Anreizunterschiede. Ein förderndes Programm könnte eine billigere Verbindung bevorzugen; ESnet könnte Kapazität und Resilienz bevorzugen, die mehreren Programmen dienen; und ein Standort könnte notwendige lokale Aufrüstungen verschieben, um das nationale Netz zu nutzen. Die Aufgabe der Governance ist es, diese Entscheidungen mit wissenschaftlichen Ergebnissen in Einklang zu bringen, anstatt zuzulassen, dass jede Institution Kosten einfach auf einen anderen Haushaltsposten verschiebt. (ESnet Site Coordinators Committee und Kostenpolitik;Berichte zu Anforderungsüberprüfungen)

Berkeley Lab betreibt das System, während das DOE die Mission festlegt

ESnet hat keine Unternehmenshierarchie eines Netzbetreibers. Ihre Autorität ist über eine Kette von Bundesprogrammen verteilt. Das Office of Science des Energieministeriums legt die Mission fest. Das Advanced Scientific Computing Research stellt die wesentliche programmatische und budgetäre Aufsicht bereit. Das Berkeley Lab beherbergt die Scientific Networking Division, die für Design, Betrieb und Entwicklung der Einrichtung verantwortlich ist. Die University of California verwaltet das Berkeley Lab im Auftrag des Ministeriums über einen Vertrag.

Die angeschlossenen Institutionen nehmen über Standortkoordinatoren und das ESnet Site Coordinators Committee teil.

Inder Monga fungiert als Executive Director von ESnet und leitet die Scientific Networking Division des Berkeley Lab. Die öffentlich bekannte Führung nennt zudem Chin Guok als Chief Technology Officer und Zuständigen für Planung und Innovation, Adam Slagell als Chief Security Officer, Jon-Paul Herron als Director of Network Engineering und Susan Lucas als Deputy of Business Operations. Unterhalb dieser Positionen befinden sich Rollen im Bereich optische Technik, Routing, Standorttechnik, Netzbetrieb, Software, Messung, Orchestrierung, Sicherheit, Projektmanagement und Beziehungen zur Wissenschaftsgemeinschaft.

Die Breite dieser Struktur korrigiert das vereinfachte Bild eines nationalen Netzes als Sammlung von Glasfasern und Routern. ESnet benötigt Fachleute, die Spektrum beschaffen, BGP betreiben, Telemetriesysteme bauen, Open-Source-Software pflegen, Paketverhalten untersuchen, Standorte planen, Sicherheitsbeweise verwalten und wissenschaftliche Anforderungen in Netzwerkkonzepte übersetzen können. Die Organisation ist gleichermaßen operativ und entwicklungsorientiert.

Die öffentlichen Aufzeichnungen zeigen eine ungelöste Frage des Programmmanagements. Die aktuelle Governance-Seite von ESnet nennt Benjamin Brown als ihren designierten Programmmanager im ASCR, während aktuelle Materialien zu Anforderungsüberprüfungen Carol Hawk als Programmmanagerin von ESnet identifizieren. Die öffentlichen Quellen könnten nicht koordiniert aktualisiert worden sein, oder die Zuständigkeiten könnten sich geändert oder aufgeteilt haben. Die verfügbaren Daten rechtfertigen nicht die Wahl einer einzigen aktuellen Struktur ohne weitere Bestätigung.

Das ESnet Site Coordinators Committee bietet angeschlossenen Institutionen einen formellen betrieblichen Kanal. Jeder Standort benennt einen Koordinator, der Anträge genehmigen kann, die die Standortverbindung betreffen, Anforderungen mitteilt und an Diskussionen über Richtlinien oder Planung teilnimmt. Es handelt sich um eine institutionelle Nutzer-Governance, nicht um eine direkte Abstimmung jedes Wissenschaftlers, dessen Daten das Netz durchlaufen.

Diese Struktur schafft eine praktische Aufteilung der Verantwortlichkeiten. ESnet kontrolliert sein Backbone und seine Dienste. Ein angeschlossener Standort kontrolliert seine Campus-Ausrüstung, Data Transfer Nodes, lokale Sicherheit und Stromversorgung. Das ASCR kontrolliert die Finanzierung auf Programmebene. Die Wissenschaftsprogramme definieren die Konsequenzen von Verzögerungen oder Ausfällen. Internationale Partner kontrollieren ihre eigenen Netze. Der gesamte Workflow funktioniert nur, wenn diese unterschiedlichen Entscheidungsbereiche im Einklang bleiben. (ESnet-Führung;Governance)

ESnet4 trennte gewöhnlichen IP-Verkehr von großen wissenschaftlichen Strömen

Mitte der 2000er Jahre begannen verteilte Experimente das Verkehrsprofil zu verändern. Der Large Hadron Collider würde Daten am CERN erzeugen und über eine globale Hierarchie von Laboren und Rechenzentren verteilen. Allgemeine Internetkonnektivität blieb notwendig, doch einige wenige wissenschaftliche Übertragungen konnten groß genug sein, um gewöhnliche Leitungen zu dominieren. Ein einziges undifferenziertes Netz für beide Muster zu bauen, erschwerte die Kapazitätsverwaltung und die Bereitstellung von Dienstgarantien.

ESnet4 antwortete mit einer hybriden Architektur. Ein IP-Kern trug die allgemeine wissenschaftliche Kommunikation. Ein separates Science Data Network nutzte optische Hochkapazitätsleitungen für große Ströme und erlaubte die dynamische Bereitstellung von Pfaden. Ringstrukturen in Metropolregionen verbanden die großen Labore, während die Zusammenarbeit mit Internet2 und internationalen Partnern das System über die Standorte des Energieministeriums hinaus ausdehnte.

Der Unterschied lag nicht einfach zwischen langsamem und schnellem Verkehr. Der allgemeine IP-Dienst benötigt eine große Reichweite und resilientes Routing. Eine geplante Übertragung von mehreren Terabyte kann von einem reservierten Layer-2-Pfad mit bekannter Startzeit, Kapazität und Endpunkten profitieren. Das Science Data Network erkannte an, dass eine kleine Anzahl vorhersehbarer, hochwertiger Ströme ein anderes Steuerungsmodell rechtfertigen könnte als die herkömmliche Paketweiterleitung.

OSCARS entstand in diesem Umfeld. Das On-demand Secure Circuits and Advance Reservation System ermöglichte autorisierten Nutzern oder Anwendungen, Netzressourcen für einen bestimmten Zeitraum zu reservieren. Das System musste einen Pfad finden, Topologie- und Richtlinienbeschränkungen prüfen, Kapazität und VLAN-Ressourcen reservieren, den Zustand auf den Geräten erstellen und diesen Zustand entfernen, wenn die Reservierung endete. Es verwandelte eine zuvor durch manuelle Koordination erledigte Aufgabe in einen Dienst, den Software anfordern konnte.

ESnet4 zeigte auch, dass rohe Geschwindigkeit nicht mehr der einzige Engpass war. Ein reservierter Pfad kann Kapazität im Fernnetz schützen, doch die Anwendung kann dennoch langsam sein, wenn ein Speichersystem die Daten nicht schnell genug lesen kann oder eine lokale Firewall Pakete verwirft. Diese Erkenntnis führte unmittelbar zur Science-DMZ-Architektur und zur End-to-End-Messung.

Der Zeitraum etablierte ein wiederkehrendes Muster des ESnet-Designs. Ein wissenschaftliches Problem tritt zuerst als Verkehrsanforderung auf. Die Einrichtung baut physische Kapazität, einen Steuerungsmechanismus und eine betriebliche Methode rund um diese Anforderung auf. Wenn sich die Methode als nützlich erweist, verbreiten sich die Software und die Architekturhinweise über das ursprüngliche Experiment hinaus. (Historisches Material zu ESnet4 und ESnet5;OSCARS)

Science DMZ brachte den Engpass an den Rand der Institution

Ein nationales Backbone kann korrekt funktionieren, während der Forscher eine schlechte Übertragungsleistung erlebt. Der Grund ist einfach: Das Backbone ist nur ein Segment des Pfades. Unternehmens-Firewalls, gemeinsam genutzte Campus-Kerne, alte Router, unzureichende Server, Paketverluste und Speichergrenzen können eine Hochkapazitätsroute auf einen Bruchteil ihrer geplanten Geschwindigkeit reduzieren.

Science DMZ ist die Antwort von ESnet auf diese End-to-End-Realität. Die Architektur platziert Data Transfer Nodes auf einem Hochleistungspfad nahe einem kontrollierten institutionellen Perimeter. Die Sicherheitsrichtlinie wird auf die begrenzten Dienste zugeschnitten, die von diesen Systemen bereitgestellt werden, anstatt anhaltende wissenschaftliche Ströme durch eine zustandsbehaftete Allzweck-Firewall zu zwingen, die für viele Kategorien von Unternehmensanwendungen ausgelegt ist.

Der Begriff könnte fälschlich als Vorschlag zur Entfernung von Sicherheit interpretiert werden. Eine Science DMZ verlässt sich weiterhin auf gehärtete Hosts, Zugriffssteuerungslisten auf Routern, Überwachung, Schwachstellenmanagement, begrenzte Anwendungsexposition und betriebliche Disziplin. Das Design ändert den Ort und die Art der Anwendung von Kontrollen. Es vermeidet, ein Gerät mit unzureichender Leistung oder Sitzungsverhalten in den Hauptpfad zu setzen, nur weil dieses Gerät Teil des konventionellen institutionellen Sicherheitsstandards ist.

Die Leistungsmessung ist integraler Bestandteil der Architektur und nicht ein optionales Dashboard. perfSONAR-Knoten führen kontrollierte Tests von Durchsatz, Paketverlust, Latenz und Pfadänderungen durch. Wenn zwei Standorte über eine Übertragung uneinig sind, können die Messungen helfen, einzugrenzen, ob das Problem bei einem Host, einer lokalen Verbindung, einem regionalen Netz, dem ESnet-Backbone oder einem internationalen Partner beginnt. Ohne diese Evidenz könnte jeder Betreiber behaupten, sein eigenes Segment sei in Ordnung, während der Forscher weiterhin keine Daten übertragen kann.

Auch Data Transfer Nodes erfordern eigene Ingenieursarbeit. Netzwerkkarten, CPU-Anordnung, Speicher, Platten oder parallele Dateisysteme, TCP-Puffer und Übertragungssoftware bestimmen den erreichbaren Durchsatz. Die Fasterdata-Richtlinien und die technische Beratung von ESnet wandeln diese Details in wiederholbare Praktiken um. Der Ansatz hat sich weit über die Labore des Energieministeriums hinaus verbreitet, aber ESnet betreibt nicht jede Einrichtung, die den Namen verwendet.

Science DMZ wurde einflussreich, weil es eine Beschaffungsfrage in eine Systemfrage verwandelte. Eine schnellere Leitung zu kaufen, behebt keinen an anderer Stelle begrenzten Pfad. Die nützliche Leistungseinheit ist der gesamte Workflow, von Speicher zu Speicher oder von Instrument zur Berechnung, wobei jede administrative Domäne gemessen und mit einer klaren Verantwortung versehen wird. (Science-DMZ-Richtlinien;Netzwerkperformance-Tools)

ESnet5 brachte kontinentales 100G in die Produktion

Der nächste Kapazitätssprung wurde durch die Advanced Networking Initiative und Fördermittel aus dem US-Konjunkturprogramm unterstützt. ESnet erhielt 62 Millionen US-Dollar durch den American Recovery and Reinvestment Act, um einen 100-Gbit/s-Langstrecken-Prototyp zu entwickeln und die Migration zu ESnet5 zu unterstützen. Die Investition umfasste mehr als neue Router. ESnet sicherte sich Rechte an Spektralkapazität in einer nationalen Glasfaserinfrastruktur, was dem Programm mehr Kontrolle über die Einführung und Aufrüstung von Wellenlängen gab.

ESnet5 ging Ende 2012 in Produktion. Zu dieser Zeit beschrieben das Energieministerium und ESnet es als das schnellste Wissenschaftsnetz der Welt. Diese historische Behauptung war mit einer bahnbrechenden kontinentalen 100G-Bereitstellung verbunden. Sie sollte 2026 nicht ohne Einschränkungen als weltweites Ranking wiederholt werden. Forschungsnetze veröffentlichen heute Kapazitäten mit unterschiedlichen Metriken, darunter Geschwindigkeiten einzelner Schnittstellen, aggregierte Backbone-Kapazität, optisches Spektrum und experimentelle Demonstrationen.

Die verfügbare Evidenz liefert keinen neutralen aktuellen Vergleich, der einen universellen Gewinner feststellt.

Der ökonomische Effekt von 100G war größer als eine zehnfache Schnittstellen-Aufrüstung. Wissenschaftliche Projekte konnten routinemäßige Langstreckenübertragungen planen, die zuvor Leitungen viel länger belegt hätten. Labore konnten einen Teil der Berechnung oder Speicherung zentralisieren, anstatt sie lokal zu replizieren. Internationale Kollaborationen erhielten ein leistungsfähigeres nordamerikanisches Backbone. Die neue Kapazität deckte zudem lokale Einschränkungen schneller auf und steigerte den Wert von Science DMZ und perfSONAR.

ESnet5 behielt die hybride Beziehung zwischen Paketdiensten und dedizierten Wissenschaftspfaden bei. Es vertiefte auch die Bedeutung der Automatisierung. Im 100G-Maßstab konnte die Reservierung von Kapazität, die Fehlerdiagnose und die Aufrechterhaltung konsistenter Dienste in einer nationalen Infrastruktur nicht allein auf punktuellen Gerätekonfigurationen beruhen.

Das Projekt zeigt, wie öffentliche Infrastrukturinvestitionen die wissenschaftlichen Optionen verändern, bevor ein einzelnes Experiment das gesamte Netz nutzt. Die Kapazität schafft eine Reserve für künftige Instrumente, aber diese Reserve ist nicht in gleicher Weise Verschwendung wie ein ungenutztes Einzelhandelsprodukt. Ihr Wert umfasst die Vermeidung von Experimentverzögerungen, die Aufnahme von Ausfällen und die Ermöglichung neuer Workflow-Tests, ohne auf einen weiteren Bauzyklus warten zu müssen.

Diese Logik erfordert auch Disziplin. Die angekündigte Kapazität muss mit der tatsächlichen wissenschaftlichen Nutzung verknüpft werden, und Investitionen müssen anpassbar bleiben, wenn sich Prognosen ändern. Die späteren Arbeiten von ESnet in den Bereichen Telemetrie, Caching und Orchestrierung spiegeln das Bestreben wider, mehr wissenschaftlichen Wert aus jedem installierten Bit zu ziehen, anstatt kontinuierliches physisches Wachstum als einzige Antwort zu behandeln. (Historische Ankündigung von ESnet5)

ESnet6 ist ein optisches, Paket- und Softwaresystem

Das ESnet6-Projekt begann 2017 und wurde am 11. Oktober 2022 nach etwa sechs Jahren Design und Bau öffentlich gestartet. Das Berkeley Lab meldete zum Start über 46 Tbit/s aggregierte Kapazität, verteilt auf eine dedizierte Infrastruktur von rund 15.000 Meilen, mit Backbone-Verbindungen zwischen 400 Gbit/s und 1 Tbit/s. Der Jahresbericht 2024 verzeichnete später 57 Tbit/s und Verbindungen von bis zu 1,2 Tbit/s. Die Zahlen gehören zu unterschiedlichen Zeitpunkten und beschreiben ein wachsendes System, keine widersprüchlichen Definitionen eines statischen Netzes.

Die physische Schicht umfasst Langstrecken-Glasfaserstrecken, optische Leitungssysteme, Verstärker, Spektrumrechte, Colocation-Einrichtungen und örtliche Zugangspunkte. Der Bericht von 2024 zählte 278 Standorte mit optischen Verstärkern. Kohärente Optik transportiert mehrere Hochgeschwindigkeitskanäle über die Faser, während Verstärker und rekonfigurierbare optische Geräte die Signalpegel aufrechterhalten und Wellenlängen lenken. Ein auf einer Karte dargestellter Pfad kann durch Dark Fiber, Spektrum, einen beleuchteten Dienst oder eine Partnervereinbarung kontrolliert werden.

Die Beschreibung von 15.000 Meilen bedeutet nicht, dass das Energieministerium das rechtliche Eigentum an allen Kabeln hält.

Oberhalb der optischen Schicht bieten Router und Dienstkanten IP, private Routing-Umgebungen, Layer-2-Dienste, Peering und Cloud-Konnektivität. Der Jahresbericht zählte 78 Standorte mit Routern. Einzelne Standorte können je nach Anforderungen mit 10, 100 oder 400 Gbit/s angeschlossen werden, während Backbone-Verbindungen mehrere Schnittstellen oder Wellenlängen bündeln können, um höhere Werte zu erreichen.

Die Softwareschicht unterscheidet ESnet6 von einer rein kapazitätsbasierten Aufrüstung. Automatisierung hält den Zustand von Geräten und Diensten aufrecht. Programmierbare Telemetrie liefert den Betreibern detailliertere Evidenz. OSCARS stellt reservierte Pfade bereit. SENSE experimentiert mit anwendungsgesteuerter Koordination über verschiedene Domänen hinweg. High-Touch nutzt programmierbare Hardware, um eine höhere Sichtbarkeit von Paketen und Strömen zu erzeugen. APIs und Testbed-Schnittstellen ermöglichen es erfolgreicher Forschung, in Richtung Betrieb voranzuschreiten.

Der Bau legte auch größeren Wert auf Resilienz. Diversifizierte Routen, mehrere Standortzugänge, unabhängige Stromversorgung, alternative Router und Hochverfügbarkeitsstandorte verringern die Möglichkeit, dass ein einzelner Ausfall ein Labor vom nationalen System trennt. Diese Schutzmaßnahmen haben unterschiedliche Geltungsbereiche. Ein redundantes Backbone hilft nicht, wenn beide lokalen Leitungen durch denselben Kabelkanal verlaufen, und ein zweiter Router schafft keine Resilienz, wenn beide Geräte von derselben Stromversorgung abhängen.

ESnet6 muss daher als eine vielschichtige Einrichtung verstanden werden. Die Glasfaser schafft die physische Reichweite. Die Optik schafft Kapazität. Die Router schaffen Paketdienste und private Netze. Die Software schafft Wiederholbarkeit und Programmierbarkeit. Die Messung überprüft, ob der versprochene Pfad tatsächlich funktioniert. Organisatorische Vereinbarungen ermöglichen den Übergang über Grenzen hinweg, die ESnet nicht besitzt. (Start von ESnet6;Jahresbericht 2024)

Was 57 Tbit/s bedeuten – und was nicht

Netzwerkstatistiken verdichten oft mehrere Schichten in eine einzige Zahl. Die von ESnet für 2024 veröffentlichte Zahl von 57 Tbit/s stellt die aggregierte Ingenieurskapazität dar, die über das System verteilt ist. Sie entspricht nicht einer einzigen physischen Verbindung, dem für jedes Labor verfügbaren Durchsatz oder dem zu jeder Zeit transportierten Verkehr. Derselbe Bericht beschreibt Backbone-Verbindungen zwischen 400 Gbit/s und 1,2 Tbit/s, sieben Standorte in den USA mit 400 Gbit/s oder mehr und 2,7 Tbit/s transatlantische Kapazität. Jede Zahl beantwortet eine andere Frage.

Der Bericht beschrieb zudem 78 Standorte mit Routern und 278 Standorte mit optischen Verstärkern in einer Infrastruktur von rund 15.000 Meilen. Das Netz verband alle 17 nationalen Labore des Energieministeriums und zählte 28 wissenschaftliche Nutzereinrichtungen des Ministeriums, 277 Beziehungen zu Forschungs- und Bildungsnetzen, kommerziellen Netzen und anderen Netztypen in fünf Ländern, über 30.000 organisatorische Nutzer und 137 Mitarbeiter und Auftragnehmer, verteilt auf 24 Bundesstaaten.

Die Zahlen beschreiben unterschiedliche Populationen und sollten nicht summiert werden, als ergäben sie eine Kundenzahl: Router, Einrichtungen, Partnernetze, institutionelle Nutzer und Personal sind getrennte Messgrößen.

Eine Standortverbindung repräsentiert die Kapazität an einer institutionellen Grenze. Eine Backbone-Verbindung repräsentiert Kapazität zwischen Netzpunkten. Ein optisches System kann mehrere Wellenlängen transportieren, und ein logischer Dienst kann nur einen Teil der physischen Schicht nutzen. Die aggregierte Kapazität summiert mehrere Ressourcen, die nicht gleichzeitig dieselbe Quelle und dasselbe Ziel bedienen können. Das Verkehrsvolumen misst die über die Zeit transportierten Daten, nicht die zu einem Zeitpunkt maximal verfügbare Rate.

ESnet transportierte im Kalenderjahr 2024 1,77 Exabyte, gegenüber 1,7 Exabyte im Jahr 2023. Der Anstieg von 4 % war gering im Vergleich zu dem von der Einrichtung seit 1989 berichteten historischen durchschnittlichen jährlichen Wachstum von etwa 55 %. Ein einzelnes Jahr beweist nicht, dass sich die wissenschaftliche Nachfrage stabilisiert hat. Große Projekte gehen unregelmäßig in Betrieb, Softwareänderungen können Übertragungen reduzieren, und ein einzelnes Experiment oder internationales Ereignis kann die Zusammensetzung des Verkehrs schnell verändern.

Der Verkehr ist zudem konzentriert. Der Bericht von 2024 gab an, dass die Aktivitäten des Large Hadron Collider etwa die Hälfte des gesamten Verkehrs ausmachten. Fermilab war mit 136 Petabyte der größte externe Absender; NERSC war mit 75,3 Petabyte der größte Empfänger innerhalb des Energieministeriums; und Oak Ridge war mit 58,3 Petabyte der größte Absender des Ministeriums. Diese Zahlen zeigen wichtige Lasten, stellen jedoch keine vollständige Rangliste des wissenschaftlichen Werts dar. Eine kleinere Übertragung kann dringender sein oder ein einzigartiges Instrument unterstützen.

Die Kapazitätsplanung erfordert daher mehrere Perspektiven gleichzeitig: mittlerer und Spitzenverkehr, Auslastung pro Route, Reserve für Ausfälle, Geschwindigkeiten der Standortverbindungen, wissenschaftliche Fristen und künftige Anforderungen. Ein Netz, das nur um die mittlere Nutzung herum entworfen wird, kann während einer Supernova oder eines Kabelbruchs versagen. Ein Netz, das nur für das größte theoretische Ereignis entworfen wird, kann teure, unflexible Vermögenswerte schaffen.

Das Ingenieursproblem von ESnet besteht darin, Kapazität dorthin zu bringen, wo die Workflows sie erreichen können, und dann zu überprüfen, ob die Endsysteme sie nutzen können. Deshalb muss die Kapazitätszahl neben Science DMZ, Messung, Orchestrierung und Anforderungsüberprüfungen präsentiert werden und nicht als selbsterklärendes Ranking oben im Artikel. (ESnet in Zahlen)

AS293 routet für eine Mission, nicht für einen Einzelhandelsmarkt

Die öffentliche autonome Systemnummer von ESnet ist AS293. Das Netz tauscht Routen mit Standorten des Energieministeriums, Forschungs- und Bildungsnetzen, kommerziellen Netzen und bezahlten Transitprovidern aus. Die Routing-Richtlinie bestimmt, welche Pfade wissenschaftlichen Verkehr transportieren dürfen, wie Ausfälle behandelt werden und welche externen Netze direkte Zusammenschaltungen erhalten.

Die Peering-Richtlinie ist selektiv. Potenzielle Peers müssen BGP nutzen, aktuelle Informationen im Internet Routing Registry und im PeeringDB pflegen, gemäß RPKI ungültige Ankündigungen vermeiden und die mit MANRS verbundenen Routing-Sicherheitspraktiken befolgen. ESnet verlangt IPv6- oder Dual-Stack-Peering und akzeptiert keine neuen reinen IPv4-Beziehungen. Die direkte private Zusammenschaltung beginnt bei einem 100G-Port, wobei 400G stark bevorzugt wird.

Diese Bedingungen spiegeln die Mission und die Betriebskosten wider. Eine direkte Zusammenschaltung verbraucht Ports, Ingenieurszeit und Überwachungskapazität. ESnet muss nicht mit jedem Netz peeren, nur weil öffentliche Routen existieren. Sie sucht Beziehungen, die die wissenschaftlichen Pfade des Energieministeriums verbessern, die Abhängigkeit von Transit verringern oder wichtige Kollaborateure verbinden. Der öffentliche Internetzugang wird durch bezahlten Transit von Hurricane Electric und Lumen für Ziele ergänzt, die nicht effizient über Forschungsnetze oder direktes Peering erreicht werden.

Das Netz veröffentlicht BGP-Communities, die ESnet-angeschlossene Standorte, Forschungs- und Bildungsnetze und kommerzielle Netze unterscheiden. Angeschlossene Institutionen können diese Markierungen für Richtlinien nutzen, obwohl die spätere Interpretation außerhalb der Kontrolle von ESnet liegt. Eine Community ist ein beschreibendes Metadatum, keine universelle Garantie, dass alle Netze dieselbe Routing-Entscheidung treffen.

Die Routing-Sicherheit hat ebenfalls Grenzen. Das Zurückweisen von RPKI-invaliden Ankündigungen blockiert eine wichtige Kategorie fehlerhafter Routen, verhindert aber nicht alle Leaks, kompromittierte Peers, versehentlich angekündigte gültige Ursprünge oder falsche Ursprungsberechtigungen. Hijack-Überwachung kann unerwartete Ursprungsänderungen identifizieren, aber die Erkennung kann nach der Ausbreitung erfolgen. Blackholing kann einen Standort während eines Angriffs schützen, indem es den für eine Adresse bestimmten Verkehr verwirft, aber dieser Schutz funktioniert auf Kosten der Erreichbarkeit des betroffenen Präfixes.

Das missionsorientierte Design zeigt sich in den Dienstgrenzen. ESnet transportiert öffentlichen IP-Verkehr, strebt aber nicht danach, den Transitmarkt für Endverbraucher zu erobern. Ihre Routenpolitik ist um wissenschaftliche Reichweite, Resilienz und zuverlässige Zusammenschaltung herum organisiert. Der Wert des Netzes ergibt sich aus der Qualität der Pfade, die es für die bediente Gemeinschaft schafft, und nicht aus der Maximierung der Anzahl der mit AS293 verbundenen Einzelhandelskunden. (ESnet-Peering-Richtlinie)

Physische Verbindungen, private Dienste und Wege in die Cloud

Der Dienstkatalog von ESnet beginnt mit der physischen Konnektivität. Berechtigte Standorte können sich lokal oder über einen entfernten Präsenzpunkt mit 10, 100 oder 400 Gbit/s verbinden. Wenn eine Einrichtung weit von der dedizierten Infrastruktur entfernt liegt, kann ein Service On-Ramp Dark Fiber oder einen von einem Anbieter bereitgestellten beleuchteten Anschluss nutzen. Das Zugangsdesign ist Teil des wissenschaftlichen Pfads, und das letzte von einem Anbieter bereitgestellte Segment kann zur Hauptleistungsgrenze oder zum Hauptausfallpunkt werden.

Der Layer-3-IP-Dienst bietet geroutete IPv4- und IPv6-Konnektivität. Ein virtuelles privates Layer-3-Netz schafft eine logisch getrennte IP- und BGP-Umgebung für ein Programm mit mehreren Standorten, während es die physische Infrastruktur mit anderen Diensten teilt. Virtuelle private Layer-2-Netze bieten Punkt-zu-Punkt- oder Multipunkt-Ethernet-Konnektivität, die statisch konfiguriert oder über OSCARS bereitgestellt wird. Diese Dienste ermöglichen es Experimenten, Einrichtungen zu verbinden, ohne alle Beziehungen über das öffentliche Internet offenzulegen.

Privater Dienst bedeutet nicht physisch isolierter Dienst. Die logische Trennung hängt von Router-Konfiguration, Markierungen, Routing-Instanzen, Zugangskontrollen und betrieblichen Praktiken ab. Ein Ausfall der gemeinsam genutzten Plattform kann mehrere Dienste beeinträchtigen, während ein Konfigurationsfehler die beabsichtigte Trennung aufheben kann. Der Wert liegt in der kontrollierten Segmentierung und vorhersagbaren Konnektivität, nicht in der Behauptung, es bestünden keine gemeinsamen Abhängigkeiten.

Cloud Connect erweitert die ESnet-Pfade zu großen kommerziellen Cloud-Umgebungen, darunter AWS, Microsoft Azure, Google Cloud und Oracle. Ein Standort kann den Eintrittspunkt des Anbieters über dedizierte Layer-2- oder Layer-3-Konnektivität erreichen, anstatt sich auf das gewöhnliche Routing des öffentlichen Internets zu verlassen. Dies kann die Pfadkontrolle verbessern und die Exposition gegenüber variablem Transit verringern, beseitigt jedoch weder die Sicherheit auf der Cloud-Seite, die Anbieterausfälle, das Identitätsdesign, die Datenausgangskosten noch die regionale Verfügbarkeit.

Die Cloud-Beziehung zeigt, wie sich die Rolle von ESnet verändert. Die Wissenschaft des Energieministeriums existiert nicht mehr nur in Bundeslaboren und Supercomputern. Forscher können kommerziellen Objektspeicher, spezialisierte Dienste oder On-Demand-Berechnung nutzen. ESnet muss diese Ressourcen verbinden, ohne zu behaupten, die Cloud sei Teil des Bundesnetzes oder ein privater Anschluss mache ein Cloud-Konto von sich aus sicher.

Weitere Dienste umfassen sekundäres DNS, Netzzeit, Hijack-Überwachung und Blackholing. Jeder adressiert eine unterstützende Abhängigkeit, die die Forschung selbst dann unterbrechen kann, wenn die optische Kapazität verfügbar bleibt. Ein Namensfehler, eine falsche Zeit, ein Routen-Leak oder ein Denial-of-Service-Angriff kann ein wissenschaftliches System unbrauchbar machen, ohne die Glasfaser zu beschädigen.

Insgesamt stellt der Dienstkatalog eine Reihe von betrieblichen Verträgen zwischen den Netzschichten dar. Die physische Konnektivität legt den Pfad fest. Das Routing schafft Reichweite. Private Dienste schaffen logische Grenzen. Die Cloud-Anbindung erweitert das System auf kommerzielle Infrastruktur. Die Sicherheits- und Unterstützungsdienste reduzieren bekannte Fehlermodi. Der Nutzer muss an jedem Ende weiterhin einen funktionalen Endpunkt und ein lokales Netz aufbauen. (ESnet-Netzwerkdienstkatalog)

OSCARS macht Kapazität reservierbar

Der größte Teil des Internetverkehrs nutzt die verfügbare Kapazität, wenn die Pakete ankommen. Dieses Modell funktioniert gut für allgemeine Kommunikation, aber einige wissenschaftliche Übertragungen sind geplant, groß und teuer zu verzögern. OSCARS ermöglicht autorisierten Nutzern und Anwendungen, Netzressourcen für einen bestimmten Zeitraum zu reservieren.

Eine Reservierung kann Endpunkte, Start- und Endzeiten, Kapazität, VLAN-Informationen, Routenausschlüsse und andere Beschränkungen identifizieren. Das System prüft die Topologie und bestehende Reservierungen, findet einen akzeptablen Pfad, erstellt den erforderlichen Zustand im Netz und entfernt ihn, wenn die Reservierung endet. Der Dienst muss verhindern, dass dieselbe knappe Ressource doppelt zugewiesen wird, und Wartungen oder Ausfälle berücksichtigen, die die verfügbare Topologie verändern.

Die Bedeutung ist betrieblicher, nicht kosmetischer Natur. Die manuelle Bereitstellung einer Leitung kann Tage der Koordination zwischen Ingenieuren erfordern. Eine programmatische Reservierung kann in Minuten erstellt und Teil eines Experiment-Workflows werden. Das Netz hört auf, eine feste Hintergrundröhre zu sein, und wird zu einer Ressource, die die Software zusammen mit Speicher oder Berechnung anfordern kann.

OSCARS ist ein produktives Open-Source-System und wurde von anderen Netzen und Testbeds übernommen oder evaluiert. Einige öffentliche Übernahmemetriken erscheinen auf Seiten, die auch historisches Material enthalten. Die sichere Schlussfolgerung ist, dass sich das System über ESnet hinaus verbreitet hat, ohne anzunehmen, dass jede aufgeführte Implementierung weiterhin aktuell oder technisch identisch ist.

Eine Reservierung garantiert nicht den Anwendungsdurchsatz. Sie kann eine festgelegte Menge an Netzkapazität schützen, aber sie kann keinen Speicherserver schneller lesen lassen, Paketverluste in einem Campus-Netz beheben oder ein Betriebssystem anpassen. Wenn die Anwendung nur einen Bruchteil der reservierten Rate erreicht, muss die Diagnose zum End-to-End-Pfad zurückkehren.

Reservierungen werfen auch Zuteilungsfragen auf. Ein prioritäres Experiment kann von garantierter Kapazität profitieren, während ungenutzte Reservierungen die Flexibilität für andere Nutzer verringern können. Richtlinien müssen entscheiden, wer den Dienst anfordern darf, wie Konflikte gelöst werden und ob eine Reservierung zugunsten einer anderen unterbrochen werden kann. Diese Entscheidungen sind Teil der Einrichtungs-Governance, selbst wenn der Bereitstellungscode automatisch ist.

OSCARS bleibt eines der deutlichsten Beispiele dafür, wie angewandte ESnet-Software zu Infrastruktur wird. Es verwandelte eine betriebliche Praxis in einen wiederholbaren Dienst, bewahrte die menschliche Richtlinienhoheit rund um die Autorisierung und gab wissenschaftlichen Anwendungen eine kontrollierte Möglichkeit, Netzanforderungen auszudrücken. (OSCARS)

SENSE versucht, das Netz mit den Endsystemen zu koordinieren

Ein reservierter Netzpfad löst nur einen Teil eines verteilten Workflows. Speichersysteme, Übertragungsdienste und Rechenressourcen haben ebenfalls eigene Verfügbarkeit, Kapazität und Richtlinien. SENSE – Software-defined network for End-to-end Networked Science at the Exascale – erweitert die Orchestrierung über eine einzelne Netzdomäne hinaus.

Das Projekt repräsentiert Netze und Endsysteme als Ressourcen, die entdeckt werden können. Eine wissenschaftliche Anwendung kann das beabsichtigte Ergebnis beschreiben, etwa einen Datensatz mit einer bestimmten Rate zwischen Einrichtungen zu übertragen. SENSE sammelt Modelle der beteiligten Domänen, handelt Ressourcen aus, stellt Netz- und Übertragungsdienste bereit, beobachtet die Telemetrie und gibt die Ressourcen frei, wenn der Workflow endet.

Dies ist schwieriger als die Konfiguration einer einzelnen Leitung. Die beteiligten Organisationen behalten ihre eigene Autorität und ihre eigenen Datenmodelle. Eine Domäne kann Kapazität bereitstellen, während eine andere Speicher-Endpunkte oder Übertragungsdienste bereitstellt. Richtlinien, Berechtigungsnachweise und Wartungsfenster unterscheiden sich. SENSE muss diese Elemente koordinieren, ohne anzunehmen, dass ein zentraler Controller alle Systeme befehligen kann.

Während der Large Hadron Collider Data Challenge 2024 hielten SENSE-gestützte Workflows 330 Gbit/s zwischen Caltech und der University of California, San Diego aufrecht. Das Ergebnis zeigt, dass anwendungsgesteuerte Orchestrierung in einem bestimmten realen Workflow eine beträchtliche Rate erreichen kann. Es beweist nicht, dass SENSE ein universeller Produktionsdienst an allen ESnet-Standorten ist. Der Bericht von 2024 beschrieb das Projekt weiterhin als in der Forschungsphase befindlich.

Die Unterscheidung zwischen OSCARS und SENSE offenbart eine Entwicklung der Automatisierungseinheit. OSCARS reserviert Netzressourcen innerhalb einer bekannten Dienstedomäne. SENSE versucht, einen vollständigen Pfad auszuhandeln, der Systeme verschiedener Organisationen umfasst. Ersteres hat eine klarere Produktionsgrenze. Letzteres bietet größeren wissenschaftlichen Wert, trägt aber ein höheres Governance- und Integrationsrisiko.

Für Betreiber lautet die praktische Frage, wer für einen Fehler verantwortlich ist. Wenn eine Anwendung eine Absicht erklärt und der Workflow eine unzureichende Leistung zeigt, kann die Ursache im Ressourcenmodell, im Netz, im Speicher, in einem Berechtigungsnachweis, in der Anwendung oder in einem domänenübergreifenden Synchronisationsproblem liegen. Die Orchestrierung muss Evidenz liefern, die genau genug ist, um jedem Betreiber zu zeigen, welcher Teil des ausgehandelten Zustands abwich.

SENSE weist auf eine Infrastruktur hin, in der Anwendungen Ergebnisse anfordern und nicht nur Leitungen. Sein Fortschritt sollte an der wiederholbaren produktiven Nutzung über mehrere Domänen hinweg, an klaren Support-Zuständigkeiten und an der Fähigkeit gemessen werden, sich von Teilausfällen zu erholen, und nicht nur an der höchsten demonstrierten Übertragungsrate. (SENSE;Angewandte Forschung 2024)

EJFAT bringt wissenschaftliche Ereignisse direkt zu entfernter Berechnung

Die traditionelle wissenschaftliche Datenbewegung folgt oft einer dateibasierten Sequenz. Ein Experiment produziert Daten, lokale Systeme verarbeiten sie, bis sie in Dateien geschrieben werden können, die Dateien gelangen in den Speicher, und eine spätere Übertragung sendet sie zur Analyse an eine andere Einrichtung. Dieses Muster ist wohlverstanden und betrieblich zuverlässig, verzögert aber das Feedback und erfordert lokalen Speicher und lokale Berechnung, die für die Erfassungsspitze dimensioniert sind.

EJFAT – ESnet–Jefferson Lab FPGA Accelerated Transport – bietet einen anderen Weg. Es verteilt Echtzeit-Ereignisdaten, gekapselt in UDP, von einem Instrument auf verfügbare Rechen-Worker, möglicherweise in einem entfernten Supercomputing-Zentrum. Eine programmierbare FPGA-basierte SmartNIC liest die Ereignis-IDs und sendet alle zum selben Ereignis gehörenden Fragmente an einen einzelnen Worker. Wenn Computing-Knoten verfügbar oder belegt werden, kann das Steuersystem die Verteilung ändern.

Die Ereignisgruppierung ist wichtig. Ein generischer Lastverteiler kann Pakete auf Server verteilen, aber die wissenschaftliche Verarbeitung kann erfordern, dass alle Fragmente eines Detektorereignisses am selben Worker ankommen. EJFAT trennt die Hochgeschwindigkeits-Weiterleitungsfunktion von der Planung der Rechen-Worker und ermöglicht beiden Seiten unabhängiges Wachstum.

Im April 2024 übertrug eine Demonstration Daten vom Jefferson Lab in Virginia zum Supercomputer Perlmutter in Kalifornien mit 100 Gbit/s zur Echtzeitverarbeitung ohne einen zwischengeschalteten Plattenschritt. Spätere Tests nutzten Rechenressourcen in mehreren Einrichtungen und rund 20.000 Kerne, wie von ESnet berichtet. Es handelt sich um spezifische Demonstrationen, nicht um eine Garantie, dass jedes Instrument das System ohne technische Änderungen übernehmen kann.

Die Facility for Rare Isotope Beams bietet ein aktuelleres betriebliches Beispiel. ESnet meldete im Juli 2026, dass Forscher rohe Experimentdaten mit etwa 5–6 Gbit/s über EJFAT an entfernte Supercomputer streamten. Ein Lauf, der 615 GB in 15 Stunden produzierte, wurde in 20 Minuten auf acht Knoten von Perlmutter unter Verwendung von Machine-Learning-Inferenz verarbeitet. Die niedrigere Netzrate als bei der 100G-Demonstration macht das Ergebnis nicht weniger wichtig; der wissenschaftliche Nutzen war das schnellere Feedback während eines realen Workflows.

Echtzeit-Streaming verändert die Ökonomie einer Einrichtung. Ein Detektor kann gemeinsam genutzte Berechnung nutzen, anstatt ausreichend lokale Kapazität für alle Spitzen zu bauen. Forscher können Ergebnisse prüfen, während die knappe Strahlzeit noch verfügbar ist. Das System schafft aber auch neue Abhängigkeiten. Eine Netzunterbrechung, ein Problem bei der Rechenzuteilung oder ein Fehler in der Ereignisverteilung kann das Experiment in Echtzeit beeinträchtigen, anstatt nur eine spätere Dateiübertragung zu verzögern.

EJFAT bleibt ein fortgeschrittener Prototyp oder eine aufstrebende Plattform und kein universell unterstützter Dienst. Die produktive Einführung erfordert Integration mit Instrumenten, Sicherheit, FPGA-Verfügbarkeit, betriebliche Verantwortung, Planungsvereinbarungen und ein klar definiertes Verhalten bei UDP-Paketverlusten. Seine Bedeutung liegt darin, zu zeigen, dass das Langstreckennetz Teil des Erfassungszyklus sein kann und nicht erst danach in Aktion tritt. (EJFAT;Wissenschaftlicher Höhepunkt FRIB)

High-Touch, perfSONAR und iperf3 machen den Pfad beobachtbar

Ein Hochkapazitätsnetz kann auf Weisen versagen, die aggregierte Auslastungsdiagramme nicht zeigen. Kurze Bursts können eine Warteschlange füllen, Pakete können in falscher Reihenfolge ankommen, Verluste können nur eine Richtung oder eine Verkehrsklasse betreffen, und eine Route kann sich zwischen Tests ändern. Sicherheitsrelevante Ströme können zudem in einer statistischen Stichprobe untergehen.

High-Touch nutzt programmierbare Hardware und Software, um detailliertere Paket- und Strömungstelemetrie zu sammeln als traditionelle stichprobenbasierte Aufzeichnungen. 2024 wurde es eingesetzt, um den Durchsatz des Large Hadron Collider, die mit dem Verkehr des Rubin Observatory verbundene Paketumordnung und Sicherheitsereignisse zu untersuchen. Ziel ist es, diagnostische Präzision zu erlangen und Verhaltensweisen zu identifizieren, die ein aggregierter Verkehrssummenwert verbergen würde.

Detailliertere Evidenz hat ihren Preis. Paket- und Strömungsinformationen erfordern Speicherung, Verarbeitung, Zugangskontrolle und sorgfältige Interpretation. Sie können kommunizierende Endpunkte, Kooperationsmuster und den Zeitpunkt wissenschaftlicher Aktivitäten offenlegen. Ein System, das zur betrieblichen Sichtbarkeit geschaffen wurde, wird daher zu einem sensiblen Datenasset.

perfSONAR befasst sich mit einer anderen Schicht. Es ist ein verteiltes Messsystem, das von einer partnerschaftlichen Zusammenarbeit mehrerer Organisationen getragen wird, an der ESnet zentraler Teilnehmer und Gründungsmitglied ist. 2024 wurden weltweit über 2.000 Standorte gemeldet, und ESnet betreibt über 30 Standorte. Kontrollierte Tests messen Durchsatz, Latenz, Verlust und Pfadverhalten zwischen den teilnehmenden Knoten.

Das verteilte Design ist zentral. Ein Forscher kann eine langsame Übertragung melden, aber ein Test zwischen gut konzipierten perfSONAR-Knoten kann zeigen, ob der zugrunde liegende Pfad die erwartete Rate aufrechterhält. Richtungstests können Asymmetrien isolieren. Wiederholte Messungen können offenbaren, wann die Verschlechterung begann. Traceroute-Daten können eine Pfadänderung identifizieren, obwohl die beobachtete Route und das tatsächliche Weiterleitungsverhalten der Anwendung voneinander abweichen können.

iperf3 bietet aktive Durchsatztests über TCP, UDP oder SCTP mit Unterstützung für IPv4 und IPv6. ESnet pflegt das Open-Source-Tool und berichtet Tests von über 150 Gbit/s auf 200G-Pfaden unter bestimmten Bedingungen. Ein synthetischer Test ist kein Anwendungsbenchmark. Er hilft zu bestimmen, ob der Host und das Netz Verkehr unter kontrollierten Bedingungen transportieren können, wonach das Verhalten von Speicher und Anwendung getrennt analysiert werden kann.

Zusammen bieten High-Touch, perfSONAR und iperf3 unterschiedliche Einblicke in die Realität. High-Touch beobachtet Produktionsströme mit höherer Genauigkeit. perfSONAR liefert geplante oder On-Demand-Messungen über mehrere Domänen hinweg. iperf3 testet direkt den Endpunkt- und Netzdurchsatz. Kein Einblick ist vollständig, aber die Kombination verringert die Versuchung, einen verteilten Fehler vom lokalen Dashboard eines einzelnen Betreibers aus zu diagnostizieren. (Netzwerkperformance-Tools;Betriebliche Innovationen 2024)

Caching kann Verkehr eliminieren, statt ihn schneller zu transportieren

Kapazität hinzuzufügen ist nicht die einzige Möglichkeit, ein Wissenschaftsnetz zu verbessern. Manche Datensätze werden von Forschern derselben Region wiederholt angefordert. Jede Kopie über das Fernnetz zu transportieren, verschwendet Kapazität und erhöht die Verzögerung, selbst wenn das Backbone die Last absorbieren kann.

Der Bericht über angewandte Forschung von ESnet für 2024 beschrieb fünf regionale Cache-Knoten, die von wissenschaftlichen Datengemeinschaften genutzt werden. In der untersuchten Menge reduzierten die Caches den Fernverkehr um durchschnittlich 33 Terabyte pro Tag. Zwei Drittel der Anfragen wurden lokal bedient, und die mittlere Cache-Trefferquote betrug 94 %. Der Effekt variierte erheblich je nach Standort: Die berichtete Reduzierung des Fernverkehrs erreichte 69,3 % in Südkalifornien, 48,4 % in Chicago und 6,6 % in Boston.

Die Unterschiede sind aufschlussreich. Der Wert eines Caches hängt von der Beliebtheit der Datensätze, den lokalen Nutzern, der Speichergröße, der Ersetzungsrichtlinie und der Dienstkonfiguration ab. Ein Cache, der nahe einer Gemeinschaft platziert ist, die wiederholt dieselben Daten analysiert, kann große Übertragungen eliminieren. Ein Cache, der vielfältige oder selten wiederholte Datensätze bedient, kann Speicher verbrauchen, ohne denselben Nutzen zu bringen.

Caching verändert auch die Kontrolle. Der Netzbetreiber beginnt, an der Datenplatzierung mitzuwirken, während die wissenschaftlichen Gemeinschaften entscheiden müssen, welche Datensätze kopiert werden dürfen, wie die Aktualität gewährleistet wird und wer darauf zugreifen darf. Speicherausfälle und veraltete Inhalte werden zu betrieblichen Anliegen neben dem Netz.

Die Studie zeigt, warum das effizienteste Bit dasjenige sein kann, das nie ins Backbone gelangt. Optische Aufrüstungen erhöhen das Angebot. Caching verändert die Nachfrage. Die Workflow-Planung kann Übertragungen aus Spitzenlastzeiten verschieben. Kompression oder lokale Filterung können Daten vor der Übertragung reduzieren. Ein reifes Infrastrukturprogramm bewertet alle diese Mechanismen, anstatt den Fortschritt nur an installierten Terabit zu messen.

Das Ergebnis muss auf die untersuchte Implementierung beschränkt bleiben. Es beweist nicht, dass jeder wissenschaftliche Datensatz eine Trefferquote von 94 % erreichen wird oder dass Caching neue Kapazität für einmalige Echtzeitströme ersetzen kann. Es liefert Evidenz dafür, dass Datenarchitektur und Netzarchitektur gemeinsam entworfen werden können. (Angewandte Forschung 2024)

Transatlantische Wissenschaft erfordert physische Vielfalt und Kapazität

Die heimische Infrastruktur von ESnet kann nicht von ihren internationalen Verpflichtungen getrennt werden. Die Hochenergiephysik ist um Einrichtungen und Rechenzentren auf beiden Seiten des Atlantiks organisiert, und der Jahresbericht 2024 schrieb etwa die Hälfte des ESnet-Verkehrs den Aktivitäten des Large Hadron Collider zu. Ein Kabelausfall zwischen Europa und Nordamerika kann daher eine zentrale wissenschaftliche Last beeinträchtigen, selbst wenn alle heimischen Router weiter funktionieren.

In den Jahren 2024 und Anfang 2025 erhöhte ESnet die gemeldete transatlantische Kapazität von rund 700 Gbit/s auf 2,7 Tbit/s. Ein wichtiger Teil des Programms war eine 15-jährige Vereinbarung mit Aqua Comms über ein Viertel eines Faserpaares auf einer Route, die New York, Dublin und London verbindet. ESnet teilt zudem Kapazität und Kosten mit GÉANT auf mehreren Kabelsystemen. Das Ingenieursziel ist es, mindestens 3,2 Tbit/s auf vier physikalisch diversifizierten Pfaden zu erreichen, mit einer Architektur, die über 10 Tbit/s hinaus wachsen kann.

Der Unterschied zwischen Kapazität und Vielfalt ist entscheidend. Zwei logische Dienste können sich ein Kabel, eine Landestation oder einen Landkabelkanal teilen und gemeinsam ausfallen. Die Reparatur von Unterwasserkabeln kann Fehlerortung, Genehmigungen, ein Kabelschiff, geeignete Wetterbedingungen und die physische Bergung der beschädigten Faser erfordern. Die Wiederherstellung kann Wochen oder Monate dauern. Deshalb plant ESnet Szenarien mit drei gleichzeitigen Kabelausfällen, anstatt anzunehmen, dass eine einzelne Backup-Route ausreicht.

Langfristige Spektrumrechte geben der Einrichtung mehr Kontrolle über Aufrüstungen als wiederholte Käufe fertiger Leitungen. Sie schaffen aber auch Verpflichtungen gegenüber bestimmten Kabelsystemen, Landungsinfrastrukturen und betrieblichen Partnern. ESnet eliminiert das maritime Risiko nicht durch den Erwerb von Spektrum. Sie gewinnt die Fähigkeit, Kapazität und Resilienz über mehrere Systeme hinweg zu gestalten, bleibt aber abhängig von den Kabeleigentümern, den Reparaturprozessen und den Partnernetzen.

Dies ist ein weiterer Zusammenhang, in dem das Wort „dediziert“ Vorsicht erfordert. ESnet kontrolliert dedizierte Rechte und Infrastruktur auf wichtigen Routen, aber das Modell der physischen Vermögenswerte variiert. Heimische und internationale Pfade können Dark Fiber, Spektrum, beleuchtete Dienste, Colocation und Partnerkapazitäten umfassen. Eine Linie auf der Karte offenbart nicht dasselbe Maß an Eigentum oder Reparaturhoheit auf allen Segmenten.

Die Beziehung zu GÉANT zeigt, warum Forschungsnetze kooperativ sein können, ohne zentral gesteuert zu werden. Die beiden Organisationen können sich Kosten teilen und wissenschaftlichen Verkehr koordinieren, aber jede bleibt für ihre eigenen Institutionen und Mitglieder verantwortlich. Die End-to-End-Leistung hängt weiterhin von nationalen Forschungsnetzen, Campus-Systemen und experimentellen Einrichtungen ab, die außerhalb der Kontrolle beider Backbones liegen. (Transatlantischer Meilenstein;Jahresbericht 2024)

Wissenschaftliche Nachfrage kombiniert kontinuierliche Skalierung, seltene Spitzen und harte Fristen

Der Large Hadron Collider liefert kontinuierliche Skalierung. Sein verteiltes Computing-Modell bewegt Experimentdaten zwischen CERN, Fermilab, Brookhaven, Universitäten und anderen Zentren und erzeugt anhaltenden internationalen Verkehr. Der geplante Hochluminositätsbetrieb wird Detektordaten, Simulationen und Replikationen erhöhen. Das Netz muss routinemäßig riesige Ströme transportieren und gleichzeitig genügend Routenvielfalt aufrechterhalten, um Kabel- oder Einrichtungsausfälle zu überleben.

Das Vera C. Rubin Observatory setzt eine Frist. Das Teleskop in Chile ist darauf ausgelegt, etwa alle 30 Sekunden ein Bild von rund 13 GB zu produzieren. Der Datenpfad erlaubt eine schnelle Verarbeitung am SLAC und die Erzeugung von Warnmeldungen über transiente Objekte, sodass andere Observatorien reagieren können. ESnet meldet das Ziel, jedes Bild über rund 12.000 Meilen in weniger als sieben Sekunden zu transportieren. Die Route umfasst Partner-Forschungsnetze in Südamerika und anderen Ländern, sodass das Ergebnis von koordinierter Ingenieursarbeit über die ESnet-Domäne hinaus abhängt.

DUNE erzeugt eine außergewöhnliche Spitze. Während einer Supernova rechnet das Neutrinoprogramm mit der Notwendigkeit, bis zu 600 TB in 100 Sekunden zu bewegen. Über zwanzig Jahre soll das Programm rund 900 PB erzeugen. Dies sind Planungsanforderungen für einen künftigen Betrieb, keine Beschreibung des aktuellen Verkehrs. Sie sind wichtig, weil das Ereignis nicht neu geplant werden kann, nachdem Kapazität verfügbar ist. Ein Netz, das nur um die mittlere Auslastung herum gebaut wird, kann im Moment des größten wissenschaftlichen Werts versagen.

Die Fusionsforschung kombiniert internationale Distanz mit einem langen Entwicklungshorizont. Im Mai 2026 transportierte ein Test 176 TB Daten von ITER in Marseille zur DIII-D-Anlage von General Atomics in San Diego mit fast 80 Gbit/s. ITER war noch im Bau, sodass die Übertragung Bereitschaft demonstrierte und keinen normalen Vollausbaubetrieb. Anforderungsmaterialien sehen für einige künftige Fusions-Workflows etwa zwei Petabyte pro Tag und mindestens 200 Gbit/s vor.

FRIB und Jefferson Lab zeigen ein drittes Muster: Das Experiment benötigt möglicherweise eine Fernanalyse, während die Daten noch ankommen. EJFAT ermöglicht es, Ereignisströme zu Rechenressourcen am NERSC oder in Oak Ridge zu leiten, ohne auf den Abschluss und das Kopieren von Dateien zu warten. Lichtquellen, Elektronenmikroskope und andere Instrumente stehen vor ähnlichen Entscheidungen bezüglich lokaler Filterung, entfernter KI-Inferenz und der Geschwindigkeit, mit der Ergebnisse zum Operator zurückkehren müssen.

Die Klima- und Geowissenschaften erweitern die Nachfrage nochmals. Große Simulationen und Beobachtungsdatensätze bewegen sich zwischen Rechen- und Speichereinrichtungen, während Feldsensoren sich an Orten ohne konventionelle Glasfaser befinden können. Keine einzelne angekündigte Rate repräsentiert alle diese Bedürfnisse. ESnet muss anhaltende Massentransfers, seltene Spitzen, Latenz-armes Feedback, internationale Kollaboration und Fernerfassung innerhalb desselben Einrichtungsmodells bedienen. (Fallstudie Rubin Observatory;Fallstudie DUNE;Anforderungsüberprüfungen)

Anforderungsüberprüfungen verwandeln wissenschaftliche Pläne in Netzarchitektur

ESnet kann nicht warten, bis ein Experiment seinen ersten Datensatz produziert, bevor Glasfaser, Router oder transatlantische Kapazität beschafft werden. Langstreckenvereinbarungen, Gerätekauf, Standortbau und Softwareentwicklung brauchen Jahre. Die Einrichtung führt daher Anforderungsüberprüfungen mit den Wissenschaftsprogrammen des Energieministeriums über einen Horizont von fünf bis zehn Jahren durch.

Forscher und Einrichtungsmitarbeiter beschreiben Instrumente, erwartete Datenvolumen, Speicherorte, Rechenziele, Zeitbeschränkungen, internationale Kollaborateure, Cloud-Nutzung und Resilienzanforderungen. Netz- und Rechenexperten analysieren dann den gesamten Workflow. Eine Anforderung nach einer größeren Verbindung kann ein wichtigeres Problem im lokalen Speicher, der Routenvielfalt, der Sicherheitsarchitektur oder der Übertragungssoftware aufdecken.

Der Überprüfungsprozess ist eine Form des Co-Designs. Die Wissenschaftsprogramme erklären, was sie erreichen wollen; ESnet übersetzt das Ziel in Infrastrukturabhängigkeiten und testet, ob der vorgeschlagene Pfad funktionieren kann. Das Ergebnis kann die Kapazität der Standortverbindungen, neue Routen, Seekabelverträge, die Einführung von Science DMZ, Orchestrierungsforschung, Personalentscheidungen und den Zeitplan einer künftigen Netzgeneration beeinflussen.

Die Hauptüberprüfung der Hochenergiephysik, die 2025 abgeschlossen und im Januar 2026 veröffentlicht wurde, umfasste 127 Teilnehmer und 14 Fallstudien in einem rund 400-seitigen Bericht. Ihre Bedeutung liegt nicht darin, dass alle Prognosen richtig sind. Instrumente können sich verzögern, Software kann effizienter werden und neue Lasten können auftreten. Der Wert liegt in einer dokumentierten Aufzeichnung, in der Forscher, Netzingenieure, Rechenzentren und Geldgeber dieselben Annahmen sehen und sie gezielt überarbeiten können.

Die Prognose bleibt schwierig, weil die wissenschaftliche Nachfrage diskontinuierlich ist. Eine Supernova kann während der Lebensdauer eines Experiments nie auftreten, während ein KI-Workflow schneller wachsen kann als der formelle Überprüfungszyklus. Das mittlere Verkehrswachstum ist für Budgets nützlich, kann aber die fallspezifische Planung nicht ersetzen. Der außergewöhnlich niedrige 4%ige Verkehrsanstieg von ESnet im Jahr 2024 beweist nicht, dass die langfristige Nachfrage gestoppt hat; er zeigt, warum ein einzelnes Jahr kein jahrzehntelanges Infrastrukturprogramm bestimmen sollte.

Die Anforderungsüberprüfungen verteilen auch Verantwortung. Ein Labor kann nicht annehmen, dass das nationale Backbone einen unzureichenden Campus-Pfad korrigiert, und ESnet kann nicht annehmen, dass ein Wissenschaftsprogramm sich anpasst, nachdem Kapazität gebaut wurde. Abhängigkeiten in einen gemeinsamen Plan zu setzen, macht spätere Abweichungen konkreter. (Berichte zu Anforderungsüberprüfungen)

Wireless Edge und QUANT-NET testen die Grenzen der Einrichtung

Ein nationales Glasfasernetz bedient feste Institutionen gut. Wissenschaftliche Instrumente arbeiten nicht immer an solchen Orten. Geothermiefelder, Umweltobservatorien und temporäre Kampagnen haben möglicherweise keine Abdeckung durch Netzbetreiber, keine zuverlässige Stromversorgung oder keine wirtschaftlich tragfähige Glasfaserstrecke. Das Wireless-Edge-Programm von ESnet untersucht, wie private Mobilfunknetze, Wi-Fi, Richtfunk und Satellitensysteme einen wissenschaftlichen Workflow zu solchen Orten verlängern können.

Eine im Juni 2026 bekanntgegebene geothermische Installation in Nevada kombinierte privates 4G unter Nutzung des Citizens Broadband Radio Service, weitreichendes Wi-Fi HaLow, konventionelles Wi-Fi, Starlink-Backhaul, Richtfunk und einen selbstversorgten tragbaren Mast. Das Design antwortete auf die Bedingungen eines einzelnen Feldes. Es handelte sich nicht um ein allgemeines drahtloses ESnet-Produkt und konnte nicht die anhaltende Kapazität von Langstrecken-Glasfaser bieten. Gelände, Wetter, Spektrum, Stromversorgung und der Satellitenanbieter blieben Teil des Dienstpfads.

Der wichtigere organisatorische Punkt ist, dass ESnet nicht am nächstgelegenen Glasfaserpunkt Halt machte und den Rest als Verantwortung einer anderen Institution behandelte. Ihre Aufgabe in der Wissenschaftsbetreuung behandelte Erfassung, Backhaul und Ferntransport als einen einzigen Workflow. Dieser Ansatz kann wertvoller sein als ein einheitliches Produkt, weil abgelegene Wissenschaftsstandorte unterschiedlichen physischen Beschränkungen unterliegen.

QUANT-NET erkundet eine andere Grenze. Das vom ASCR finanzierte Projekt baut ein Quanten-Netz-Testbed mit drei Knoten, das das Berkeley Lab und zwei Standorte der University of California, Berkeley, auf etwa fünf Kilometern verbindet. Die Arbeit umfasst Ionenfallen, Photonenkopplung, Verschränkungsaustausch, Bell-Zustandsmessungen, zeitkritische Steuerung und eine modulare Softwarestruktur.

Die Beziehung zu ESnet liegt hauptsächlich in der Steuerung und Orchestrierung. Quantenexperimente benötigen klassische Kommunikation, präzises Timing und Koordination zwischen Geräten, die noch schwer zu betreiben sind. Open-Source-Steuerungssoftware kann Experimente wiederholbarer machen und manuelle Anpassungen reduzieren. Das Testbed ist kein produktives Quanten-Internet und transportiert keine großen konventionellen wissenschaftlichen Datenmengen über Verschränkung.

Wireless Edge und QUANT-NET sollten daher nach dem beurteilt werden, was sie lehren und was wiederverwendet werden kann. Keines von beiden zeigt, dass jeder ESnet-Nutzer drahtlosen Zugang oder eine Quantenverbindung erhält. Sie erweitern die Forschungsfunktion der Einrichtung in Bereiche, in denen künftige wissenschaftliche Netze neue physische Medien und Steuerungssysteme benötigen könnten. (Wireless-Edge-Installation;Quanten-Netz-Forschung)

American Science Cloud und ESnet7 verschieben die Planungseinheit von Standorten zu Workflows

Das Integrated Research Infrastructure-Programm und die entstehende American Science Cloud spiegeln einen Wandel darin wider, wie das Energieministerium seine Einrichtungen beschreibt. Anstatt ein Instrument, ein Netz, ein Datenrepository und einen Supercomputer als unabhängige Dienste zu behandeln, zielen die Programme darauf ab, sie als eine föderierte Umgebung für wissenschaftliche Daten, KI und Hochleistungsrechnen zu betreiben.

Die Rolle von ESnet liegt in der Konnektivität und Orchestrierung. Daten müssen von Instrumenten zu Speicher und Beschleunigern fließen; Nutzer und Dienste benötigen kontrollierten Zugang; Workflows müssen verfügbare Ressourcen entdecken; und Telemetrie muss zeigen, ob das System das wissenschaftliche Ziel erreicht. EJFAT, SENSE, OSCARS, Cloud Connect und High-Touch behandeln Teile dieses Problems, aber keines von ihnen bildet für sich allein die American Science Cloud.

Auf der Confab26 wurde Inder Monga als Project Deputy der American Science Cloud identifiziert, und die Programmsitzungen umfassten Demonstrationen und Planung für die nächste Netzgeneration. Dies ist Evidenz für aktive institutionelle Arbeit, nicht der Beweis, dass eine universelle Wissenschafts-Cloud im August 2026 fertiggestellt war. Zugangsrichtlinien, Inventar der angeschlossenen Ressourcen, Produktionssupport und Governance waren weiterhin in Entwicklung befindliche Themen.

ESnet7 erscheint im selben Planungsumfeld. Der Name ist real, und Innovationssitzungen befassten sich mit Telemetrie, Paketinspektion, Datenbewegung, KI und Quantennetzen. ESnet6 bleibt jedoch die aktuelle Produktionsgeneration. In den verfügbaren Evidenzen wurde keine endgültige öffentliche Architektur, keine Design-Grundlage, keine Lieferantenauswahl, kein vollständiges Budget und kein Starttermin identifiziert.

Diese Unterscheidung ist wichtig, weil Netzgenerationen lange vor der Installation der Ausrüstung Erwartungen wecken. Ein Planungsprogramm kann Forschungsprioritäten, Lieferantenbeziehungen und Kapitalanforderungen beeinflussen. Es sollte nicht als fertiggestelltes Backbone dargestellt werden. Die vertretbarste Interpretation ist, dass ESnet die betrieblichen Erfahrungen von ESnet6 und die aktuellen Workflow-Projekte nutzt, um zu entscheiden, was eine siebte Generation sein sollte.

Geschwindigkeit wird weiterhin wichtig sein, aber die Evidenz legt nahe, dass Programmierbarkeit und Intelligenz ebenso zentral werden könnten. Ein schnellerer Link sagt einer Anwendung nicht, wo verfügbare Rechenleistung existiert, identifiziert keine Mikro-Bursts, plant keinen Detektorstrom und weist nicht nach, dass ein domänenübergreifender Dienst ordnungsgemäß beendet wurde. Die strategische Frage von ESnet7 lautet, wie viel des wissenschaftlichen Workflows das Netz verstehen und koordinieren sollte, ohne zu einem nicht verwaltbaren zentralen Controller zu werden. (Confab26-Programm;Angewandte Forschung 2024)

Bundesfinanzierung trägt die Einrichtung, doch die Haushaltslinie ist kein Umsatz

ESnet finanziert sein Backbone nicht durch den Verkauf von Kapazität an die Öffentlichkeit. Das Energieministerium finanziert es hauptsächlich über die ASCR-Aktivität mit der Bezeichnung High Performance Network Facilities and Testbeds. Der Antrag für das Fiskaljahr 2027 sah 103 Millionen US-Dollar für diese Programmposition vor, verglichen mit 97,261 Millionen in der zuvor genehmigten Spalte.

Die Zahlen sind der beste öffentliche Indikator für den Umfang des Programms, stellen jedoch keine Gewinn- und Verlustrechnung von ESnet dar. Die Position unterstützt auch netzbezogene Testbeds, Softwarewartung, Aufrüstungen und Forschungsaktivitäten. Sie offenbart keine separaten jährlichen Betriebskosten für das Produktions-Backbone, die Kapitalinvestition für jede Netzgeneration oder die mit einzelnen Standortverbindungen verbundenen Einnahmen.

Die öffentliche Finanzierung ermöglicht es der Einrichtung, zu investieren, bevor die Nachfrage kommerziell wird. Sie kann langfristiges Spektrum erwerben, Open-Source-Tools pflegen, Experimente mit geringem Volumen und hohem wissenschaftlichem Wert unterstützen und Routenvielfalt über das hinaus aufbauen, was die unmittelbare Nutzung rechtfertigen würde. Dasselbe Modell schafft jedoch Abhängigkeit von Kongresszuweisungen, Ministeriumsprioritäten und der Betriebsstruktur des Berkeley Lab.

Standortverbindungen sind nicht immer kostenfrei. Die Site User Cost Policy von ESnet erlaubt es institutionellen Nutzern, verbindungsbezogene Ausgaben zu tragen, abhängig von Trägerschaft, Berechtigung und zusätzlichen Anforderungen. Die Beziehungseinheit ist der Standort, nicht der einzelne Forscher. Endnutzer werden von ESnet weder einzeln belastet noch registriert.

Das Fehlen unabhängiger Konten schränkt die Finanzanalyse ein. Die öffentlichen Materialien offenbaren keine vollständige Lieferantenkonzentration, Lohnsumme, Abschreibungspläne, Vermögensregister nach Route oder jährliches Kapitalbudget. Die 103 Millionen US-Dollar als „Einnahmen von ESnet“ zu bezeichnen, wäre falsch. Die genaueste Schlussfolgerung ist, dass ein Bundesprogramm eine Produktionseinrichtung, ihre Aufrüstungen, die Softwarepflege und ihre Testbeds über eine breitere Aktivitätsposition finanziert.

Die Finanzierungsstruktur beeinflusst auch die strategische Wahl. Ein kommerzielles Netz kann eine Route aufgeben, die ihre Kosten nicht deckt. Eine öffentliche Wissenschaftseinrichtung muss die nationale Mission, die wissenschaftliche Gelegenheit und die langfristige Kapazität mit Haushaltsbeschränkungen in Einklang bringen. Dies kann Investitionen ohne sofortige finanzielle Rendite rechtfertigen, macht aber transparente Priorisierung und die durch Anforderungsüberprüfungen erzeugte Evidenz unverzichtbar. (ASCR-Haushaltsantrag Fiskaljahr 2027;ESCC und Standortrichtlinie)

Zuverlässigkeit, Routing-Sicherheit und Telemetrie schaffen eigene Pflichten

Der ESnet-Bericht von 2024 verzeichnete ein relevantes Verfügbarkeitsergebnis: Alle zehn in der Metrik enthaltenen Office of Science-Standorte erreichten 100 % Dienstverfügbarkeit, geplante Wartungen ausgeschlossen. Es war das erste Jahr, in dem alle Standorte gleichzeitig die Anforderung von 99,9 % übertrafen. Der Jahresbericht wies zudem eine breitere Verfügbarkeitszahl von 99,99 % aus. Dies sind nützliche Kennzahlen, jedoch mit unterschiedlichem Umfang, und sie beweisen nicht, dass alle Dienste, Institutionen und internationalen Pfade unterbrechungsfrei blieben.

Das Site Resilience Program untersucht diversifizierte Zugänge, Router, Stromversorgung und Ausfalldomänen an angeschlossenen Einrichtungen. Dies spiegelt eine unbequeme Realität wider: Ein nationales Backbone kann redundant sein, während ein Labor weiterhin von einem einzigen Kabelkanal oder einer lokalen Ausrüstung abhängt. Die Zuverlässigkeit muss das Gebäude und das Datenübertragungssystem erreichen und darf nicht an der Backbone-Karte enden.

Die Routing-Richtlinie bietet eine weitere Kontrollebene. ESnet weist RPKI-invalide Ankündigungen in Peering-Beziehungen zurück, verlangt aktuelle Routing-Registrierungen und bietet Hijack-Überwachung und Blackholing von Zielen. Diese Kontrollen reduzieren bekannte Risiken, machen domänenübergreifendes Routing jedoch nicht unfehlbar. Ein gültiger Ursprung kann dennoch mit einem Leak oder einem Richtlinienfehler verbunden sein, und Blackholing schützt andere Systeme, indem es das betroffene Ziel unerreichbar macht.

Automatisierung schafft einen ähnlichen Kompromiss. Standardisierte Konfiguration, Inventar und Orchestrierung können manuelle Fehler reduzieren und die Wiederherstellung beschleunigen. Ein falsches Template, eine falsche Richtlinie oder ein falscher Datensatz kann sich jedoch auch schnell über mehrere Geräte ausbreiten. Die angemessene Antwort umfasst gestaffelte Einführung, unabhängige Validierung, klare Rollback- oder schrittweise Wiederherstellungsverfahren und Grenzen für die Autorität eines einzelnen Automatisierungskontos.

Betriebsdaten verdienen die gleiche Aufmerksamkeit. Die Datenrichtlinie der Einrichtung gibt an, dass Nutzungsinformationen von Routern und NetFlow auf unbestimmte Zeit aufbewahrt und auf Speichern an der Ost- und Westküste der USA repliziert werden können. Aktive perfSONAR-Messungen werden sechs Monate auf einer einzelnen Festplatte ohne Backup aufbewahrt. Router-Nutzungsinformationen und Traceroute sind öffentlich, während Strömungs- und Sicherheitsprotokolle eingeschränkten Zugang haben.

Dies widerspricht nicht der Aussage, dass ESnet keinen einzelnen Endnutzer formell als Abonnenten erfasst. Es handelt sich um zwei unterschiedliche Systeme. ESnet pflegt keine individuelle Registrierungs- und Abrechnungsbeziehung, aber die Netzmetadaten können Endpunkte, kommunizierende Institutionen, Zeiten und Verkehrsmuster identifizieren. Hochpräzise Telemetrie verbessert Diagnose und Sicherheit, erhöht aber den Bedarf an Minimierung, Zugangskontrolle, Überprüfung der Aufbewahrungsfristen und verantwortungsvoller Nutzung.

Das solideste Resilienzmodell ist nicht die Behauptung perfekter Verfügbarkeit. Es ist ein Satz von Mechanismen mit definierten Grenzen: physische Vielfalt, Standorttechnik, Routingsicherheit, Messung, Incident Response, Daten-Governance und die Bereitschaft, den Umfang jeder Metrik zu veröffentlichen. (Verfügbarkeitsmeilenstein;Einrichtungsdatenrichtlinie;Peering-Richtlinie)

Wofür ESnet steht

Die Geschichte von ESnet kann als Abfolge schnellerer Netze gelesen werden: spezialisierte Vorläufersysteme, ESnet4, das kontinentale 100G-Netz ESnet5 und das mehrere Terabit umfassende ESnet6. Die Chronologie ist real, erfasst aber nicht die wichtigere Kontinuität. Die Einrichtung hat die Architektur rund um die wissenschaftliche Arbeit wiederholt geändert, wenn die rohe Kapazität das Problem nicht mehr löste.

Das Science Data Network trennte außergewöhnliche Ströme vom allgemeinen Verkehr. OSCARS machte Kapazität reservierbar. Science DMZ veränderte den institutionellen Perimeter. perfSONAR und iperf3 verwandelten Leistungsstreitigkeiten in Messungen. SENSE verband die Anwendungsabsicht mit mehreren administrativen Domänen. EJFAT brachte den Fernpfad in den Detektorzyklus. Caching veränderte die Nachfrage, und transatlantisches Spektrum erweiterte die Kontrolle von ESnet über internationales Wachstum.

Die Autorität der Organisation bleibt begrenzt. DOE und ASCR legen Mission und Finanzierung fest. Das Berkeley Lab betreibt die Einrichtung. Die University of California verwaltet das Labor im Rahmen eines Vertrags. Standortkoordinatoren genehmigen Änderungen, die ihre Institutionen betreffen. Internationale Partner kontrollieren ihre eigenen Netze. Cloud-Anbieter, Netzbetreiber, Kabeleigentümer und Ausrüstungslieferanten behalten Macht über Komponenten, von denen ESnet abhängt.

Diese verteilte Kontrolle ist keine Unannehmlichkeit, die Software beseitigen könnte. Sie ist die Bedingung, unter der ein wissenschaftliches Netz funktioniert. Die praktische Leistung liegt darin, genügend Koordination zu bieten, um einen Workflow zu liefern, ohne vorzugeben, dass eine einzelne Institution den gesamten Pfad besitzt.

Dieselbe Disziplin sollte die Behauptungen über die Zukunft leiten. ESnet7 befindet sich in Planung, SENSE verbleibt im jüngsten vollständigen Bericht in der Forschungsphase, EJFAT ist ein fortgeschrittener Prototyp oder eine aufstrebende Plattform, QUANT-NET ist experimentell und die American Science Cloud war noch im Aufbau. Die Evidenz ist nützlicher, wenn der Reifegrad präzise beschrieben wird.

Die langfristige Bedeutung von ESnet liegt im Modell der gemeinsamen wissenschaftlichen Einrichtung. Das Netz wird wie ein wissenschaftliches Instrument behandelt, mit Anforderungen, Betrieb, Software, Messung, Forschung und öffentlicher Finanzierung. Dieses Modell erkennt an, dass ein Detektor und ein Tausende Kilometer entfernter Supercomputer wenig gemeinsamen Wert erzeugen, wenn die Systeme dazwischen nicht als ein einziger Pfad konzipiert sind.

Die Frage ist daher nicht, ob ESnet nach einem universellen Ranking das schnellste Netz ist. Keine aktuelle neutrale Metrik in der verfügbaren Evidenz stützt diese Behauptung. Die vertretbare Schlussfolgerung ist stärker und nützlicher: ESnet ist eines der dokumentiert leistungsfähigsten Wissenschaftsnetze der Welt, und sein Hauptbeitrag liegt darin, verteilte Wissenschaft von Ende zu Ende betrieblich zu machen. (Geschichte von ESnet;Start von ESnet6;Jahresbericht 2024)

Quellen