ESnet et le réseau qui transforme des installations scientifiques distantes en une seule machine

Synthèse

• ESnet est une installation utilisateur scientifique du Département de l’Énergie des États-Unis exploitée par le Laboratoire national Lawrence Berkeley, et non un opérateur commercial ou une société indépendante.
• ESnet6 combine environ 15 000 milles de fibre dédiée, des systèmes optiques et de paquets, des services privés, de l’interconnexion, de la mesure et du contrôle programmable; son chiffre de 57 Tbit/s de capacité est un agrégat, pas une vitesse offerte à l’utilisateur.
• Science DMZ, perfSONAR, OSCARS, SENSE, High-Touch et EJFAT montrent que la contribution distinctive d’ESnet réside dans l’ingénierie de bout en bout, depuis l’instrument et la périphérie du campus jusqu’au calcul distant.
• Les travaux préparatoires d’ESnet7 et d’American Science Cloud indiquent un réseau plus profondément intégré aux flux de travail scientifiques, mais plusieurs composants demeurent des démonstrations, des systèmes de recherche ou des services émergents.

Un réseau scientifique entre dans l’expérience elle-même

En avril 2024, des données du Jefferson Lab en Virginie ont traversé les États-Unis jusqu’au supercalculateur Perlmutter en Californie à 100 Gbit/s et ont été traitées sans être d’abord écrites sur disque. La démonstration utilisait le système expérimental EJFAT d’ESnet pour placer le réseau étendu au cœur du flux de travail scientifique, plutôt qu’après celui-ci.

Ce changement illustre la question centrale qui se pose à ESnet: un réseau peut-il connecter des instruments, du stockage et du calcul distant de manière suffisamment étroite pour que des installations séparées par des milliers de kilomètres se comportent comme les parties d’une seule machine?

Un parcours typique commence avec un détecteur, un télescope, un microscope ou une simulation au sein d’un laboratoire ou d’une installation de recherche. Les systèmes d’acquisition locaux collectent les données, les serveurs de transfert et de stockage les préparent, et un réseau de campus les achemine jusqu’à un périmètre contrôlé. ESnet peut alors transporter le trafic à travers les États-Unis, l’Atlantique, jusque dans un supercalculateur du Département de l’Énergie, par l’intermédiaire d’un partenaire de la recherche et de l’enseignement, ou dans un nuage commercial.

Le résultat peut revenir sous forme de jeu de données analysé, d’alerte, de modèle ou de décision quant à la suite à donner à l’expérience.

Aucune organisation ne contrôle seule ce parcours complet. Les équipes en charge des instruments, les réseaux des laboratoires, les réseaux régionaux de la recherche, les fournisseurs de nuage, les partenaires internationaux et les centres de supercalcul peuvent tous relever d’institutions différentes. ESnet exploite la couche étendue orientée mission et collabore avec ces opérateurs pour faire fonctionner ce parcours comme un système.

Un serveur de stockage lent, une connexion de campus saturée ou un pare-feu inadapté peut gaspiller la capacité d’un réseau fédérateur national rapide; une panne ESnet peut interrompre une installation locale bien conçue.

Sur le plan institutionnel, ESnet est une installation utilisateur du Bureau de la science du Département de l’Énergie. L’Advanced Scientific Computing Research (ASCR) en assure la supervision principale, et la Division des réseaux scientifiques du Laboratoire national Lawrence Berkeley l’exploite. Le Laboratoire de Berkeley est lui-même géré pour le compte du DOE par l’Université de Californie sous contrat.

ESnet n’a ni actionnaire connu, ni capitalisation boursière, ni bilan commercial autonome, de sorte qu’il est préférable de l’appréhender comme une infrastructure scientifique fédérale plutôt que comme une entreprise de réseau disposant d’une clientèle publique.

Les chercheurs rencontrent généralement ESnet indirectement, par l’intermédiaire d’un instrument, d’un supercalculateur, d’un service de laboratoire, d’une connexion universitaire ou d’un réseau partenaire. L’installation distingue les utilisateurs institutionnels (sites) des utilisateurs finaux et précise qu’elle n’enregistre pas et ne suit pas individuellement chaque utilisateur final. Le chiffre de plus de 30 000 utilisateurs organisationnels indiqué dans le rapport annuel 2024 est donc une mesure institutionnelle, et non un nombre d’abonnés.

Les comparaisons avec les opérateurs commerciaux ordinaires ne rendent compte que partiellement du rôle d’ESnet. ESnet gère le routage, le transport optique et l’interconnexion, mais il mène aussi des examens de besoins, développe des outils open source, teste de nouveaux services et aide les sites à diagnostiquer les performances de bout en bout. Sa finalité publique n’est pas de vendre une connexion, mais de faire fonctionner ensemble des installations scientifiques géographiquement dispersées avec suffisamment de rapidité, de traçabilité et de clarté opérationnelle pour soutenir la recherche elle-même. (Gouvernance ESnet;services réseau)

Le calcul distant a créé le besoin d’un réseau scientifique partagé

L’histoire officielle d’ESnet remonte au milieu des années 1970, lorsque le calcul et les communications à longue distance étaient tous deux rares. Au Centre de calcul pour la recherche sur la fusion thermonucléaire contrôlée du Laboratoire national Lawrence Livermore, le personnel connectait un calculateur Control Data Corporation 6600 prêté au moyen de quatre modems acoustiques.

L’équipement et les débits appartiennent à une autre époque, mais le problème opérationnel est reconnaissable: une communauté scientifique spécialisée avait besoin d’un accès distant à un calcul coûteux qu’il était impossible de reproduire dans chaque institution participante.

Au cours de la fin des années 1970 et du début des années 1980, les différentes communautés de recherche du Département de l’Énergie développèrent leurs propres réseaux. La physique des hautes énergies et la recherche sur la fusion magnétique utilisaient des installations, des collaborateurs et des flux de données différents, et des systèmes prédécesseurs comme HEPnet et MFEnet reflétaient ces frontières. Constituer des réseaux sur mesure était rationnel tant que les services commerciaux ne pouvaient offrir la portée, le débit ou l’attention opérationnelle requis, mais cela créait aussi des doublons.

Chaque programme pouvait négocier des circuits, entretenir la technologie et développer une expertise de manière indépendante, ce qui fragmentait la collaboration et les évolutions à long terme.

La création officielle d’ESnet en 1986 a consolidé ces fonctions en un réseau scientifique plus large. Le changement fut autant organisationnel que technique. Une installation partagée pouvait anticiper la demande des différents programmes, exploiter des liaisons nationales, coordonner les connexions internationales et conserver des personnels spécialisés; elle pouvait également faire passer la capacité d’une préoccupation propre à un projet à un plan d’infrastructure à l’échelle du Département.

Ce modèle initial a établi plusieurs caractéristiques encore visibles aujourd’hui. Les utilisateurs étaient définis par leur mission scientifique plutôt que par un marché de détail. Des ordinateurs centraux et des instruments justifiaient l’investissement public partagé. La conception du réseau suivait les programmes de recherche aux calendriers longs. L’exploitation exigeait des personnes qui comprenaient à la fois les systèmes de communication et les conséquences scientifiques d’une panne. La demande arrivait de manière irrégulière, car une seule expérience pouvait générer un trafic bien supérieur au niveau de base ordinaire.

Le Laboratoire de Berkeley possédait sa propre lignée en matière de réseaux. Il avait connecté un CDC 6600 à l’ARPANET en 1974, et des chercheurs y contribuèrent plus tard aux travaux fondateurs sur le contrôle de congestion TCP. Les travaux de Van Jacobson et Mike Karels relèvent de l’environnement plus large du Laboratoire de Berkeley et ne doivent pas être attribués à ESnet seul.

Ce chevauchement institutionnel n’en est pas moins important: il a placé les réseaux scientifiques de production à proximité de chercheurs qui considéraient le comportement des protocoles, la mesure et la performance comme des problèmes d’ingénierie pouvant être étudiés plutôt que subis comme des contraintes figées.

L’exploitation a été transférée au Laboratoire de Berkeley en 1996, établissant ainsi le site actuel aux côtés du National Energy Research Scientific Computing Center, des chercheurs en réseau, des ingénieurs logiciels et d’autres programmes du Département de l’Énergie. Ce transfert a également renforcé une culture dans laquelle une installation de production et une organisation de recherche appliquée partagent le personnel, les laboratoires et les questions techniques. (Historique d’ESnet)

Le financement public permet à ESnet de construire avant que la demande n’arrive

Une installation utilisateur scientifique existe parce que certaines capacités sont trop coûteuses, trop spécialisées ou trop interconnectées pour que chaque équipe de recherche les construise seule. Un accélérateur de particules, une source de lumière ou un supercalculateur de pointe répondent à cette logique. ESnet l’applique aux communications. Les droits sur la fibre longue distance, les équipements optiques, les routeurs, la capacité internationale, l’exploitation continue, la cybersécurité, la mesure de performance et le soutien à l’ingénierie sont mutualisés au sein d’une installation qui dessert de nombreux programmes.

La justification du financement public découle de la nature de la demande scientifique. Un opérateur commercial peut vendre un circuit de grande capacité, mais il ne détermine généralement pas son architecture nationale en fonction d’un détecteur qui doit entrer en service des années plus tard, d’une explosion de supernova qui peut ne jamais se produire pendant la durée du contrat, ou d’un flux de recherche au faible volume commercial maise à la forte valeur publique. ESnet peut construire avant la demande mesurée parce que sa mission est la capacité scientifique plutôt qu’un revenu de réseau à court terme.

Le modèle d’installation utilisateur modifie également la manière dont la demande est identifiée. ESnet mène des examens de besoins formels avec les programmes scientifiques du Département de l’Énergie. Les chercheurs et les équipes des installations décrivent les instruments, les volumes de données, les emplacements de stockage, les destinations de calcul, les contraintes temporelles, les schémas de collaboration et les goulots d’étranglement locaux sur un horizon de cinq à dix ans.

Ces éléments alimentent le dimensionnement des liaisons de site, la diversité des routes, les achats transatlantiques, la recherche en orchestration et la conception des services.

Ce processus est moins spectaculaire qu’une nouvelle liaison optique cohérente, mais il est peut-être plus lourd de conséquences. Un accord de spectre sous-marin, l’achat d’un routeur ou la mise en place d’une seconde entrée de site peuvent prendre des années pour être financés et déployés. Attendre qu’une expérience produise les données transformerait des besoins d’infrastructure prévisibles en urgences. Les examens de besoins convertissent les plans scientifiques en délais d’ingénierie.

Ils révèlent aussi l’incertitude. Les prévisions peuvent changer, les calendriers des instruments glisser, les logiciels de réduction de données s’améliorer, l’usage du nuage augmenter, et une installation peut reconcevoir son flux de travail. ESnet ne traite pas une étude de cas comme une commande de trafic garantie, mais utilise les indices pour construire une fourchette de besoins et décider ensuite où une flexibilité, une capacité de réserve ou un déploiement progressif se justifie.

Le modèle d’installation utilisateur évite la facturation au gigaoctet pour les scientifiques individuels. Les opérations de base sont financées par des fonds fédéraux, tandis qu’une partie des coûts de connexion au niveau du site peut être répartie selon le parrainage du programme et la politique de coûts des utilisateurs de site (Site User Cost Policy). Ce dispositif n’est pas exempt d’incitations: un programme parrain peut préférer un coût de connexion moindre; ESnet peut privilégier la capacité et la résilience au bénéfice de plusieurs programmes; un site peut différer des améliorations locales nécessaires pour utiliser le réseau national. La tâche de gouvernance consiste à aligner ces décisions sur les résultats scientifiques plutôt que sur la capacité à transférer un coût vers une autre ligne budgétaire. (Comité des coordinateurs de site ESnet et politique de coûts;rapports d’examen des besoins)

Le DOE fixe la mission; le Laboratoire de Berkeley exploite le réseau

ESnet n’a pas la hiérarchie d’entreprise d’un opérateur commercial. Son autorité est répartie le long d’une chaîne de programmes fédéraux. Le Bureau de la science du Département de l’Énergie définit la mission. L’Advanced Scientific Computing Research assure la supervision et la tutelle budgétaire. Le Laboratoire de Berkeley abrite la Division des réseaux scientifiques qui conçoit, exploite et développe l’installation. L’Université de Californie gère le Laboratoire de Berkeley pour le compte du Département, sous contrat.

Les institutions connectées participent par l’intermédiaire de coordinateurs de site et du Comité des coordinateurs de site ESnet (ESnet Site Coordinators Committee).

Inder Monga est le directeur exécutif d’ESnet et dirige la Division des réseaux scientifiques du Laboratoire de Berkeley. Les informations publiques actuelles identifient également Chin Guok comme directeur de la technologie et responsable de la planification et de l’innovation, Adam Slagell comme responsable de la sécurité, Jon-Paul Herron comme directeur de l’ingénierie réseau, et Susan Lucas comme adjointe aux opérations commerciales.

Derrière ces titres se trouvent des fonctions couvrant l’ingénierie optique, le routage, l’ingénierie des sites, l’exploitation du réseau, les logiciels, la mesure, l’orchestration, la sécurité, la gestion de projet et la liaison avec les communautés scientifiques.

L’étendue de cette structure corrige l’image répandue d’un réseau national réduit à un ensemble de fibres et de routeurs. ESnet a besoin de personnes capables d’acquérir du spectre, d’exploiter BGP, de construire des systèmes de télémétrie, de maintenir des logiciels open source, d’examiner le comportement des paquets, de planifier des installations, de gérer les preuves de sécurité et de traduire les besoins scientifiques en conceptions réseau. L’organisation est à la fois opérationnelle et développementale.

Les documents publics contiennent un détail de gestion de programme non résolu. La page actuelle de gouvernance d’ESnet désigne Benjamin Brown comme responsable de programme ASCR pour ESnet, tandis que des documents récents d’examen des besoins mentionnent Carol Hawk comme responsable de programme ESnet. Les éléments disponibles permettent d’affirmer que les sources publiques n’ont pas été rapprochées ou que les responsabilités ont pu évoluer ou être partagées, mais pas de retenir un titulaire exclusif actuel sans confirmation complémentaire.

Le Comité des coordinateurs de site ESnet offre aux institutions connectées un canal opérationnel formel. Chaque site désigne un coordinateur qui peut approuver les demandes affectant sa connexion ESnet, communiquer les besoins et participer aux discussions de politique ou de planification. Il s’agit d’une gouvernance institutionnelle des utilisateurs, non d’un vote direct de chaque scientifique dont les données empruntent le réseau.

Cette structure crée une répartition concrète des responsabilités. ESnet contrôle son réseau fédérateur et ses services. Un site connecté contrôle ses équipements de campus, ses nœuds de transfert de données, sa sécurité locale et son alimentation électrique. L’ASCR contrôle le financement au niveau du programme. Les programmes scientifiques définissent les conséquences d’un retard ou d’une panne. Les partenaires internationaux contrôlent leurs propres réseaux. Le flux de travail complet ne réussit que lorsque ces surfaces de décision séparées restent alignées. (Direction d’ESnet;gouvernance)

ESnet4 a séparé le trafic ordinaire des flux scientifiques exceptionnels

Au milieu des années 2000, les expériences distribuées modifiaient le profil de trafic. Le Grand collisionneur de hadrons allait produire des données au CERN et les distribuer à travers une hiérarchie mondiale de laboratoires et de centres de calcul. La connectivité Internet générale restait nécessaire, mais un petit nombre de transferts scientifiques pouvait être suffisamment important pour saturer les liaisons ordinaires. Construire un réseau unique indifférencié pour les deux usages rendait la gestion de la capacité et les garanties de service difficiles.

ESnet4 a résolu ce problème par une architecture hybride. Un cœur IP transportait les communications scientifiques générales. Un réseau distinct dédié aux données scientifiques (Science Data Network) utilisait des circuits optiques à haute capacité pour les flux volumineux et prenait en charge le provisionnement dynamique de chemins. Des anneaux métropolitains reliaient les grands laboratoires, tandis que la collaboration avec Internet2 et des partenaires internationaux étendait le dispositif au-delà des sites du Département de l’Énergie.

L’architecture séparait le trafic selon les exigences opérationnelles plutôt que par une simple distinction « lent » / « rapide ». Le service IP général a besoin d’une large accessibilité et d’un routage résilient. Un transfert planifié de plusieurs téraoctets peut bénéficier d’un chemin de niveau 2 réservé avec une heure de début, une allocation de bande passante et des extrémités connues. Le réseau de données scientifiques reconnaissait qu’un petit nombre de flux prévisibles et de grande valeur peut justifier un modèle de contrôle différent du simple acheminement de paquets ordinaire.

OSCARS a émergé de cet environnement. L’On-demand Secure Circuits and Advance Reservation System permettait à des utilisateurs ou des applications autorisés de demander des ressources réseau pour une période définie. Le système devait trouver un chemin, vérifier les contraintes topologiques et de politique, réserver la bande passante et les ressources VLAN, créer l’état des équipements et le supprimer à l’expiration de la réservation. Il a transformé une tâche auparavant accomplie par coordination manuelle en un service que le logiciel pouvait solliciter.

ESnet4 a aussi montré que le débit brut n’était plus le seul goulot d’étranglement. Un circuit réservé peut protéger la capacité du réseau étendu, mais l’application peut malgré tout fonctionner lentement parce qu’un système de stockage ne peut pas lire assez vite ou qu’un pare-feu local rejette des paquets. Cette leçon a conduit directement à l’architecture Science DMZ et à la mesure de bout en bout.

Cette période a établi un schéma de conception récurrent chez ESnet. Un problème scientifique se présente d’abord comme un besoin de trafic. L’installation crée ensuite la capacité physique, un mécanisme de contrôle et une méthode opérationnelle autour de lui. Lorsque la méthode s’avère utile, les logiciels et les préconisations architecturales se diffusent au-delà de l’expérience initiale. (Documentation historique ESnet4 et ESnet5;OSCARS)

Science DMZ a montré que le goulot d’étranglement se situe souvent en périphérie

Un réseau fédérateur national peut fonctionner correctement pendant qu’un scientifique subit une mauvaise performance de transfert. La raison est simple: le réseau fédérateur n’est qu’un segment du chemin. Les pare-feu d’entreprise, les cœurs de réseau de campus partagés, les routeurs anciens, les serveurs sous-dimensionnés, la perte de paquets et les limitations de stockage peuvent réduire une route à haute capacité à une petite fraction du débit nominal.

Science DMZ est la réponse d’ESnet à cette réalité de bout en bout. L’architecture place les nœuds de transfert de données sur un chemin à haute performance proche d’un périmètre institutionnel contrôlé. La politique de sécurité est adaptée aux services limités exposés par ces systèmes plutôt que de forcer le trafic scientifique soutenu à traverser un pare-feu d’état généraliste conçu pour de nombreuses applications d’entreprise.

L’expression peut être interprétée à tort comme une demande de suppression de la sécurité. Une Science DMZ repose toujours sur des hôtes renforcés, des listes de contrôle d’accès de routeur, une supervision, une gestion des vulnérabilités, une exposition applicative restreinte et une discipline opérationnelle. La conception change l’endroit et la manière dont les contrôles sont appliqués. Elle évite de placer un équipement au débit ou au comportement de session inadapté sur le chemin de données principal simplement parce que cet équipement fait partie du dispositif de sécurité ordinaire de l’établissement.

La mesure de performance fait partie de l’architecture plutôt que d’être un tableau de bord optionnel. Les nœuds perfSONAR exécutent des tests contrôlés de débit, de perte de paquets, de latence et de changement de chemin. Lorsque deux sites sont en désaccord sur un transfert, les mesures peuvent aider à localiser si le problème se situe au niveau d’un hôte, d’une liaison locale, d’un réseau régional, du réseau fédérateur ESnet ou d’un partenaire international. Sans ces preuves, chaque opérateur peut déclarer que son propre segment est sain alors que le chercheur ne peut toujours pas déplacer les données.

Les nœuds de transfert de données nécessitent leur propre ingénierie. Les cartes d’interface réseau, le placement CPU, la mémoire, le disque ou les systèmes de fichiers parallèles, les tampons TCP et le logiciel de transfert déterminent le débit atteignable. Le guide Fasterdata d’ESnet et le conseil technique transforment ces détails en pratiques reproductibles. L’approche s’est largement répandue au-delà des laboratoires du Département de l’Énergie, mais ESnet n’exploite pas chaque déploiement qui utilise ce nom.

Science DMZ est devenu influent parce qu’il a transformé une question d’achat en une question de système. Acheter un circuit plus rapide ne résout pas un chemin contraint ailleurs. L’unité de performance utile est le flux de travail complet, du stockage au stockage ou de l’instrument au calcul, chaque domaine administratif étant mesuré et se voyant attribuer une responsabilité claire. (Guide Science DMZ;outils de performance réseau)

ESnet5 a fait du 100G continental un service de production

La transition majeure de capacité suivante a été soutenue par l’Advanced Networking Initiative et des fonds fédéraux de relance économique. ESnet a reçu 62 millions de dollars dans le cadre de l’American Recovery and Reinvestment Act pour développer un prototype longue distance à 100 Gbit/s et accompagner le passage à ESnet5. L’investissement comprenait plus que de nouveaux routeurs. ESnet a obtenu des droits sur de la capacité spectrale à travers un réseau national de fibre, donnant au programme un plus grand contrôle sur la manière dont les longueurs d’onde pouvaient être déployées et évoluer.

ESnet5 est entré en production fin 2012. À l’époque, le DOE et ESnet le décrivaient comme le réseau scientifique le plus rapide du monde. Cette affirmation historique était liée à un premier déploiement continental en 100G jamais réalisé. Elle ne doit pas être répétée comme un classement mondial absolu en 2026. Les réseaux de la recherche présentent désormais leur capacité au travers de différentes mesures: vitesses d’interface individuelles, capacité agrégée du réseau fédérateur, spectre optique et essais expérimentaux. Les éléments fournis ne permettent pas d’établir de comparaison neutre actuelle qui désignerait un vainqueur universel.

L’effet économique du 100G a été plus important qu’une simple multiplication par dix du débit d’interface. Les projets scientifiques pouvaient planifier des transferts longue distance routiniers qui auraient auparavant occupé les liaisons beaucoup plus longtemps. Les laboratoires pouvaient centraliser une partie du calcul ou du stockage plutôt que de le reproduire localement. Les collaborations internationales gagnaient un réseau fédérateur américain plus performant. La nouvelle capacité a aussi révélé plus rapidement les limitations locales, renforçant la valeur de Science DMZ et de perfSONAR.

ESnet5 a conservé la relation hybride entre service de paquets et chemins scientifiques dédiés. Il a également accru l’importance de l’automatisation. À l’échelle du 100G, la réservation de capacité, le diagnostic des pannes et le maintien d’un service cohérent sur une empreinte nationale ne pouvaient plus reposer sur la seule configuration manuelle des équipements.

Ce projet démontre comment l’investissement public dans les infrastructures modifie les options scientifiques avant même qu’une expérience utilise la totalité du réseau. La capacité crée une réserve pour les futurs instruments, mais une capacité de réserve n’est pas un gaspillage au même sens qu’un produit de détail inutilisé. Sa valeur inclut d’éviter de retarder des expériences, d’absorber des pannes et de permettre de tester de nouveaux flux de travail sans attendre un autre cycle de construction.

L’investissement doit néanmoins être jugé à l’aune de l’usage scientifique, et la conception doit rester adaptable lorsque les prévisions changent. Les travaux ultérieurs d’ESnet sur la télémétrie, la mise en cache et l’orchestration reflètent une volonté d’extraire davantage de valeur scientifique de chaque bit installé, plutôt que de considérer l’expansion physique continue comme la seule réponse. (Annonce historique ESnet5)

ESnet6 combine capacité optique et contrôle programmable

Le projet ESnet6 a débuté en 2017 et a été officiellement lancé le 11 octobre 2022 après environ six années de conception et de construction. Le Laboratoire de Berkeley a fait état de plus de 46 Tbit/s de capacité agrégée au lancement, sur une empreinte dédiée d’environ 15 000 milles, avec des liaisons de réseau fédérateur allant de 400 Gbit/s à 1 Tbit/s. Le rapport annuel 2024 a par la suite mentionné 57 Tbit/s et une plage de liaisons allant jusqu’à 1,2 Tbit/s. Ces chiffres se réfèrent à des dates différentes et à un système en croissance, non à des définitions contradictoires d’un réseau figé.

La couche physique comprend des chemins de fibre longue distance, des systèmes de ligne optique, des amplificateurs, des droits de spectre, des installations de colocalisation et des points d’accès locaux. Le rapport 2024 comptabilisait 278 sites d’amplificateurs optiques. Les optiques cohérentes transportent plusieurs canaux à haut débit sur la fibre, tandis que les amplificateurs et les équipements optiques reconfigurables maintiennent les niveaux de signal et acheminent les longueurs d’onde. Un chemin représenté sur une carte peut être contrôlé par de la fibre noire, du spectre, un service allumé ou un accord de partenariat.

La description des 15 000 milles n’établit pas que le DOE détient un titre de propriété sur chaque câble.

Au-dessus de la couche optique, des routeurs et des bordures de service fournissent IP, des environnements de routage privés, des services de niveau 2, du peering et de la connectivité nuage. Le rapport annuel fait état de 78 emplacements de routeurs. Les sites individuels peuvent se connecter à 10, 100 ou 400 Gbit/s selon leurs besoins, tandis que les liaisons de réseau fédérateur peuvent agréger plusieurs interfaces ou longueurs d’onde en des chiffres plus élevés.

La couche logicielle distingue ESnet6 d’une simple montée en capacité. L’automatisation maintient l’état des équipements et des services. La télémétrie programmable donne aux opérateurs une visibilité plus détaillée. OSCARS provisionne des chemins réservés. SENSE expérimente la coordination interdomaines pilotée par les applications. High-Touch utilise du matériel programmable pour obtenir une visibilité enrichie des paquets et des flux. Les API et les bacs à sable permettent aux recherches réussies de migrer vers l’exploitation.

La construction a aussi mis davantage l’accent sur la résilience. Des routes diversifiées, des entrées de site multiples, des alimentations électriques indépendantes, des routeurs alternatifs et des sites de service à haute disponibilité réduisent le risque qu’une seule défaillance retire un laboratoire du système national. Ces protections ont des portées différentes. Un réseau fédérateur redondant ne sert à rien si les deux circuits locaux partagent la même conduite, et un second routeur ne crée pas de résilience si les deux équipements dépendent du même système d’alimentation.

ESnet6 doit donc être appréhendé comme une installation en couches. La fibre crée la portée physique. Les optiques créent la capacité. Les routeurs créent les services de paquets et les services privés. Les logiciels assurent la reproductibilité et la programmabilité. La mesure établit si le chemin promis fonctionne. Les accords organisationnels permettent de franchir les frontières qu’ESnet ne contrôle pas. (Lancement ESnet6;Rapport annuel 2024)

Ce que signifient 57 Tbit/s — et ce qu’ils ne signifient pas

Les statistiques réseau agrègent souvent des couches différentes en un seul chiffre. Le chiffre de 57 Tbit/s annoncé par ESnet pour 2024 est une capacité d’ingénierie agrégée à l’échelle du système. Ce n’est ni une liaison physique unique, ni le débit disponible pour chaque laboratoire, ni le trafic écoulé à chaque instant. Le même rapport décrit des liaisons de réseau fédérateur comprises entre 400 Gbit/s et 1,2 Tbit/s, sept sites américains connectés à 400 Gbit/s ou plus, et 2,7 Tbit/s de capacité transatlantique. Chaque chiffre répond à une question différente.

Le même rapport mentionne 78 emplacements de routeurs et 278 sites d’amplificateurs optiques sur l’empreinte d’environ 15 000 milles. Il recense les 17 laboratoires nationaux du DOE connectés, 28 installations utilisateur du DOE, 277 relations avec des réseaux de recherche et d’enseignement, commerciaux ou autres dans cinq pays, plus de 30 000 utilisateurs organisationnels et 137 membres du personnel et sous-traitants répartis dans 24 États.

Ces chiffres décrivent des populations différentes et ne doivent pas être additionnés comme un total de clients: les routeurs, les installations, les réseaux partenaires, les utilisateurs institutionnels et les effectifs sont des indicateurs distincts.

Une connexion de site est la capacité à une frontière institutionnelle donnée. Une liaison de réseau fédérateur est la capacité entre deux emplacements réseau. Un système optique peut transporter plusieurs longueurs d’onde, et un service logique peut n’utiliser qu’une partie de la couche physique. La capacité agrégée additionne de nombreuses ressources qui ne peuvent pas toutes desservir simultanément la même source et la même destination. Le volume de trafic mesure la quantité de données déplacée dans le temps, et non le débit maximal disponible à un instant donné.

ESnet a transporté 1,77 exaoctet durant l’année civile 2024, contre 1,7 exaoctet en 2023. La hausse de quatre pour cent est faible au regard de la croissance annuelle moyenne historique d’environ 55 % depuis 1989. Cette année isolée ne prouve pas que la demande scientifique s’est stabilisée. Les grands projets démarrent de manière irrégulière, les évolutions logicielles peuvent réduire les transferts, et une expérience ou un événement international peut rapidement modifier la répartition.

Le trafic est par ailleurs concentré. Le rapport 2024 indique que l’activité liée au Grand collisionneur de hadrons représentait environ la moitié du trafic total. Fermilab était le plus gros émetteur externe avec 136 pétaoctets, NERSC le plus gros destinataire du DOE avec 75,3 pétaoctets, et Oak Ridge le plus gros émetteur du DOE avec 58,3 pétaoctets. Ces chiffres révèlent des charges de travail importantes, mais ils ne constituent pas un classement complet de la valeur scientifique. Un transfert plus petit peut être plus sensible au temps ou concerner un instrument unique.

La planification de capacité nécessite donc plusieurs vues simultanées: le trafic de pointe et le trafic moyen, l’utilisation par route, la réserve de capacité pour les pannes, le débit des liaisons de site, les échéances scientifiques et les besoins futurs. Un réseau conçu uniquement autour d’une utilisation moyenne peut défaillir lors d’une explosion de supernova ou d’une coupure de câble. Un réseau conçu uniquement pour le plus grand événement théorique peut surdimensionner des actifs coûteux qui restent peu flexibles.

Le problème d’ingénierie d’ESnet consiste à placer la capacité là où elle peut être atteinte par les flux de travail qui en ont besoin, puis à vérifier que les systèmes d’extrémité peuvent l’utiliser. C’est pourquoi le chiffre de capacité doit être rapproché de Science DMZ, de la mesure, de l’orchestration et des examens de besoins, plutôt que placé en tête d’article comme un classement auto-explicatif. (ESnet en chiffres)

AS293 route pour une mission, non pour un marché de détail

Le numéro de système autonome public d’ESnet est AS293. Le réseau échange des routes avec les sites du Département de l’Énergie, les réseaux de la recherche et de l’enseignement, les réseaux commerciaux et les fournisseurs de transit payants. La politique de routage détermine quels chemins peuvent transporter le trafic scientifique, comment les pannes sont gérées et quels réseaux externes bénéficient d’une interconnexion directe.

La politique de peering est sélective. Les pairs potentiels doivent utiliser BGP, maintenir des informations à jour dans l’Internet Routing Registry et PeeringDB, éviter les annonces RPKI invalides et suivre les bonnes pratiques de sécurité de routage associées à MANRS. ESnet exige du peering IPv6 ou double pile et n’accepte plus de nouvelles relations IPv4 seules. L’interconnexion privée directe commence à un port de 100G, le 400G étant fortement préféré.

Ces conditions reflètent à la fois la mission et le coût d’exploitation. Une interconnexion directe consomme des ports, du temps d’ingénierie et de la capacité de supervision. ESnet n’a pas besoin de peerer avec chaque réseau simplement parce que des routes publiques existent. Il recherche des relations qui améliorent les chemins scientifiques du DOE, réduisent la dépendance au transit ou connectent des collaborateurs majeurs. L’accès à l’Internet public est complété par du transit payant auprès de Hurricane Electric et de Lumen pour les destinations qui ne sont pas efficacement atteintes via la recherche ou le peering direct.

Le réseau publie des communautés BGP qui distinguent les sites connectés à ESnet, les réseaux de la recherche et de l’enseignement et les réseaux commerciaux. Les institutions connectées peuvent utiliser ces marqueurs pour appliquer leur propre politique, bien que l’interprétation en aval reste hors du contrôle d’ESnet. Une communauté est une métadonnée descriptive, non une garantie universelle que chaque réseau fera le même choix de routage.

La sécurité du routage a aussi ses limites. Le rejet des annonces RPKI invalides bloque une classe importante de mauvaises routes, mais ne prévient pas toute fuite, tout pair compromis, toute origine valide erronée ou toute autorisation d’origine de route incorrecte. La surveillance des détournements de route peut identifier des changements d’origine inattendus, mais la détection peut survenir après la propagation. Le routage blackhole peut protéger un site pendant une attaque en écartant le trafic vers une destination, mais cette protection agit en sacrifiant l’accessibilité pour ce préfixe.

La conception orientée mission se voit dans le périmètre de service. ESnet transporte du trafic IP public, mais ne cherche pas à gagner un marché de transit grand public. Sa politique de routage est articulée autour de l’accessibilité scientifique, de la résilience et d’une interconnexion de confiance. La valeur du réseau provient de la qualité des chemins qu’il crée pour la communauté qu’il sert, non de la maximisation du nombre de clients de détail rattachés à AS293. (Politique de peering d’ESnet)

Les chemins privés étendent la portée sans éliminer le risque externe

Le catalogue de services d’ESnet commence par la connectivité physique. Les sites éligibles peuvent se connecter localement ou via un point de présence distant à 10, 100 ou 400 Gbit/s. Lorsqu’une installation est éloignée de l’empreinte dédiée, un Service On-Ramp peut utiliser de la fibre noire ou un circuit d’opérateur allumé. La conception de l’accès fait partie du chemin scientifique, et un segment final fourni par un prestataire peut devenir la cause dominante de défaillance ou de limitation de performance.

Le service IP de niveau 3 offre une connectivité IPv4 et IPv6 routée. Un réseau privé virtuel de niveau 3 crée un environnement IP et BGP logiquement séparé pour un programme multisite tout en partageant l’infrastructure physique avec d’autres services. Les réseaux privés virtuels de niveau 2 fournissent une connectivité Ethernet point à point ou multipoint, configurée de manière statique ou provisionnée via OSCARS. Ces services permettent aux expériences de connecter des installations sans exposer chaque relation via l’Internet public.

Un service privé ne signifie pas un service physiquement isolé. La séparation logique repose sur la configuration des routeurs, les labels, les instances de routage, les contrôles d’accès et les pratiques opérationnelles. Une défaillance de la plateforme partagée peut affecter plusieurs services, et une erreur de configuration peut compromettre l’isolement prévu. La valeur réside dans une segmentation maîtrisée et une connectivité prévisible, non dans l’affirmation qu’aucune dépendance partagée n’existe.

Cloud Connect prolonge les chemins ESnet vers les principaux environnements de nuage, notamment AWS, Microsoft Azure, Google Cloud et Oracle. Un site peut atteindre un point d’accès fournisseur via une connectivité dédiée de niveau 2 ou 3 plutôt que par le routage Internet public ordinaire. Cela peut améliorer le contrôle du chemin et réduire l’exposition à un transit variable, mais ne supprime pas la sécurité côté nuage, les pannes fournisseur, la conception des identités, les frais de sortie ou la disponibilité régionale.

La relation avec le nuage illustre l’évolution du rôle d’ESnet. La science du DOE ne réside plus seulement dans les laboratoires et les supercalculateurs fédéraux. Les chercheurs peuvent utiliser du stockage objet commercial, des services spécialisés ou du calcul à la demande. ESnet doit connecter ces ressources sans prétendre que le nuage fait partie du réseau fédéral, ni qu’un circuit privé rende à lui seul un compte nuage sûr.

Parmi les autres services figurent un DNS secondaire, le temps réseau, la surveillance des détournements de route et le routage blackhole. Chacun traite une dépendance de support qui peut interrompre la recherche même lorsque la capacité optique reste disponible. Une panne de résolution de nom, une heure incorrecte, une fuite de route ou une attaque par déni de service peut rendre un système scientifique inutilisable sans endommager la fibre.

Le catalogue de services constitue un ensemble de contrats opérationnels entre les couches du réseau. La connectivité physique établit le chemin. Le routage crée l’accessibilité. Les services privés créent des frontières logiques. L’interconnexion nuage étend le système à l’infrastructure commerciale. La sécurité et les services de support réduisent les modes de défaillance connus. L’utilisateur doit encore construire un point d’extrémité fonctionnel et un réseau local à chaque bout. (Menu des services réseau ESnet)

OSCARS rend la capacité réservable

La plupart du trafic Internet utilise la capacité disponible au moment où les paquets arrivent. Ce modèle convient bien aux communications générales, mais certains transferts scientifiques sont planifiés, volumineux et coûteux à retarder. OSCARS donne aux utilisateurs et applications autorisés un moyen de réserver des ressources réseau pour une période déterminée.

Une réservation peut spécifier les extrémités, les heures de début et de fin, la bande passante, les informations VLAN, les exclusions de route et d’autres contraintes. Le système examine la topologie et les engagements existants, trouve un chemin acceptable, crée l’état réseau requis et le supprime à l’expiration de la réservation. Le service doit éviter d’allouer deux fois la même ressource rare et doit tenir compte des opérations de maintenance ou des pannes qui modifient la topologie disponible.

La portée est opérationnelle et non cosmétique. Le provisionnement manuel d’un circuit peut prendre des jours de coordination entre ingénieurs. Une réservation programmatique peut être créée en quelques minutes et devenir partie intégrante du flux de travail de l’expérience. Le réseau cesse d’être un tuyau d’arrière-plan figé et devient une ressource que le logiciel peut solliciter au même titre que le stockage ou le calcul.

OSCARS est un système de production open source et a été adopté ou évalué par d’autres réseaux et bancs d’essai. Certains chiffres publics d’adoption figurent sur des pages contenant des informations historiques, de sorte que la conclusion la plus prudente est que le système a voyagé au-delà d’ESnet, sans considérer chaque déploiement listé comme actuel et identique.

Une réservation ne garantit pas le débit applicatif. Elle peut protéger une quantité définie de capacité réseau, mais elle ne peut pas accélérer la lecture d’un serveur de stockage, corriger la perte de paquets dans un réseau de campus ni paramétrer un système d’exploitation. Si l’application n’atteint qu’une fraction du débit réservé, le diagnostic doit revenir au chemin de bout en bout.

Les réservations soulèvent aussi des questions d’allocation. Une expérience prioritaire peut bénéficier d’une capacité garantie, tandis que des réservations inutilisées peuvent réduire la flexibilité pour les autres. Les politiques doivent décider qui peut demander un service, comment les conflits sont résolus et si une réservation peut être préemptée. Ces décisions relèvent de la gouvernance de l’installation, même lorsque le code de provisionnement est automatique.

OSCARS reste l’un des exemples les plus clairs de logiciel appliqué devenu infrastructure. Il a traduit une pratique opérationnelle en service reproductible, a préservé la politique humaine autour de l’autorisation et a donné aux applications scientifiques un moyen contrôlé d’exprimer leurs besoins réseau. (OSCARS)

SENSE teste si les applications peuvent demander un résultat de bout en bout

Un chemin réseau réservé ne résout qu’une partie d’un flux de travail distribué. Les systèmes de stockage, les services de transfert de données et les ressources de calcul ont aussi leur disponibilité, leur capacité et leurs politiques. SENSE — Software-defined network for End-to-end Networked Science at the Exascale — étend l’orchestration au-delà d’un seul domaine réseau.

Le projet représente les réseaux et les systèmes d’extrémité comme des ressources découvrables. Une application scientifique peut décrire un résultat souhaité, comme le déplacement d’un jeu de données entre deux installations à un débit requis. SENSE collecte les modèles des domaines entités, négocie les ressources, provisionne les services réseau et de transfert, observe la télémétrie et libère les ressources une fois le flux de travail terminé.

Cela est plus difficile que de configurer un seul circuit. Les organisations participantes conservent leur propre autorité et leurs propres modèles de données. Un domaine peut exposer de la bande passante tandis qu’un autre expose des points de stockage ou des services de transfert. Les politiques, les habilitations et les fenêtres de maintenance diffèrent. SENSE doit coordonner sans supposer qu’un contrôleur central peut commander chaque système.

Lors du défi de données du Grand collisionneur de hadrons en 2024, des flux de travail reposant sur SENSE ont soutenu un débit de 330 Gbit/s entre Caltech et l’Université de Californie à San Diego. Ce résultat montre que l’orchestration pilotée par les applications peut fonctionner à un débit substantiel dans un flux de travail réel spécifique. Il ne montre pas que SENSE est un service de production universel sur tous les sites ESnet. Le rapport 2024 décrivait encore le projet comme étant en phase de recherche.

OSCARS et SENSE automatisent des unités de travail différentes. OSCARS réserve des ressources réseau à l’intérieur d’un domaine de service connu. SENSE tente de négocier un chemin complet qui inclut des systèmes appartenant à différentes organisations. Le premier a une frontière de production plus nette. Le second offre une valeur scientifique plus large mais comporte davantage de risques de gouvernance et d’intégration.

Pour les opérateurs, la difficulté pratique est la propriété de la défaillance. Si une application déclare une intention et que le flux de travail sous-performe, la cause peut résider dans le modèle de ressource, le réseau, le service de stockage, une habilitation, l’application ou un problème de synchronisation interdomaine. L’orchestration requiert des preuves suffisamment précises pour indiquer à chaque opérateur quelle partie de l’état négocié a divergé.

SENSE pointe vers une infrastructure où les applications demandent des résultats plutôt que des circuits. Ses progrès doivent être jugés à l’aune d’une utilisation en production multi-domaine reproductible, d’une responsabilité de support claire et de la capacité à se remettre d’une défaillance partielle, plutôt que par le seul débit de transfert le plus élevé atteint. (SENSE;Recherche appliquée 2024)

EJFAT déplace les événements scientifiques directement vers le calcul distant

Le déplacement traditionnel des données scientifiques suit souvent une séquence en mode fichier. L’expérience produit des données, les systèmes locaux en traitent suffisamment pour écrire des fichiers, ces fichiers entrent dans le stockage, et un transfert ultérieur les envoie vers une autre installation pour analyse. Ce schéma est bien compris et opérationnellement fiable, mais il retarde le retour d’information et nécessite un stockage et un calcul locaux dimensionnés pour le pic d’acquisition.

EJFAT — le système ESnet–Jefferson Lab FPGA Accelerated Transport — prend en charge un chemin différent. Il distribue des données d’événement en direct, encapsulées en UDP, d’un instrument vers des travailleurs de calcul disponibles, potentiellement dans un centre de supercalcul distant. Une carte SmartNIC programmable basée sur un FPGA lit les identifiants d’événement et envoie tous les fragments appartenant au même événement vers un seul travailleur. À mesure que des nœuds de calcul deviennent disponibles ou occupés, le système de contrôle peut modifier la distribution.

Le regroupement par événement est crucial. Un répartiteur de charge générique peut distribuer les paquets entre les serveurs, mais le traitement scientifique peut exiger que tous les fragments d’un événement du détecteur arrivent chez le même travailleur. EJFAT sépare la fonction de transfert à haut débit de la planification des travailleurs de calcul, permettant à chaque côté d’évoluer indépendamment.

La démonstration d’avril 2024 du Jefferson Lab vers Perlmutter décrite en introduction a atteint 100 Gbit/s sans étape disque intermédiaire. Des tests ultérieurs ont utilisé des ressources de calcul réparties sur plusieurs installations et environ 20 000 cœurs, selon les rapports d’ESnet. Ces résultats montrent le potentiel du système, mais ne signifient pas que chaque instrument peut l’adopter sans modifications techniques.

Le Facility for Rare Isotope Beams (FRIB) offre un exemple opérationnel plus récent. ESnet a rapporté en juillet 2026 que des chercheurs ont transmis en continu des données brutes d’expérience via EJFAT à un débit d’environ 5–6 Gbit/s vers des supercalculateurs distants. Une campagne ayant généré 615 Go en 15 heures a été traitée en 20 minutes sur huit nœuds Perlmutter en utilisant de l’inférence par apprentissage machine. Le débit réseau inférieur par rapport à la démonstration à 100G ne rend pas ce résultat moins important; le bénéfice scientifique était un retour d’information plus rapide pendant un flux de travail réel.

La diffusion en continu en direct modifie l’économie d’une installation. Un détecteur peut emprunter du calcul partagé au lieu de construire une capacité locale suffisante pour chaque pic. Les chercheurs peuvent examiner les résultats pendant que le temps de faisceau, rare, est encore disponible. Le système crée aussi de nouvelles dépendances. Une interruption du réseau, un problème d’allocation de calcul ou une erreur de distribution d’événement peut affecter l’expérience en temps réel plutôt que de retarder un transfert de fichier ultérieur.

EJFAT reste un prototype avancé ou une plateforme émergente, et non un service universellement supporté. L’adoption en production exigera l’intégration des instruments, la sécurité, la disponibilité des FPGA, la responsabilité opérationnelle, des accords de planification et un comportement clair en cas de perte de paquets UDP. Sa signification réside dans la démonstration que le réseau étendu peut se trouver à l’intérieur de la boucle d’acquisition plutôt qu’après elle. (EJFAT;Fait marquant scientifique FRIB)

High-Touch, perfSONAR et iperf3 rendent le chemin observable

Un réseau de grande capacité peut tomber en panne de manières que les graphiques d’utilisation agrégée ne révèlent pas. De courtes rafales peuvent saturer une file d’attente, les paquets peuvent arriver dans le désordre, la perte peut toucher une seule direction ou une seule classe de trafic, une route peut changer entre deux tests, et des flux pertinents pour la sécurité peuvent disparaître dans l’échantillonnage statistique.

High-Touch utilise du matériel et des logiciels programmables pour collecter une télémétrie des paquets et des flux plus riche que les enregistrements échantillonnés traditionnels. En 2024, il a été utilisé pour enquêter sur le débit du Grand collisionneur de hadrons, sur des réordonnancements de paquets associés au trafic de l’observatoire Rubin et sur des événements de sécurité. L’objectif est la précision diagnostique: identifier un comportement qu’un total de trafic grossier masquerait.

Des preuves plus riches ont un coût. Le détail des paquets et des flux exige du stockage, du traitement, des contrôles d’accès et une interprétation prudente. Il peut révéler les points de communication, les schémas de collaboration et la chronologie de l’activité scientifique. Un système conçu pour la visibilité opérationnelle devient dès lors un actif informationnel sensible.

perfSONAR opère à un autre niveau. Il s’agit d’un système de mesure distribué soutenu par un partenariat multi-organisationnel dont ESnet est un entité fondateur. Plus de 2 000 emplacements étaient signalés dans le monde en 2024, et ESnet en exploite plus de 30. Des tests contrôlés mesurent le débit, la latence, la perte et le comportement des chemins entre les nœuds entités.

La conception distribuée est centrale. Un chercheur peut signaler un transfert lent, mais un test entre des nœuds perfSONAR bien conçus peut montrer si le chemin sous-jacent supporte le débit attendu. Des tests directionnels peuvent isoler l’asymétrie. Des mesures répétées peuvent montrer quand la dégradation a commencé. Les données de traceroute peuvent identifier un changement de chemin, bien que la route observée et le comportement réel de transfert de l’application puissent différer.

iperf3 fournit des tests de débit actifs via TCP, UDP ou SCTP et prend en charge IPv4 et IPv6. ESnet maintient cet outil open source et rapporte des tests au-dessus de 150 Gbit/s sur des chemins à 200G dans des conditions spécifiques. Un test synthétique n’est pas un banc d’essai applicatif. Il aide à déterminer si l’hôte et le réseau peuvent déplacer du trafic dans des conditions contrôlées, après quoi le comportement du stockage et de l’application peut être examiné séparément.

Ensemble, High-Touch, perfSONAR et iperf3 créent des vues différentes de la réalité. High-Touch observe les flux de production avec une plus grande fidélité. perfSONAR fournit des mesures de chemin programmées ou à la demande entre domaines. iperf3 teste directement le débit du point d’extrémité et du réseau. Aucune vue unique n’est complète, mais leur combinaison réduit la tentation de diagnostiquer une défaillance distribuée depuis le tableau de bord local d’un seul opérateur. (Outils de performance réseau;Innovations opérationnelles 2024)

La mise en cache peut supprimer le trafic plutôt que de le transporter plus vite

Ajouter de la capacité n’est pas le seul moyen d’améliorer un réseau scientifique. Certains jeux de données sont demandés de manière répétée par des chercheurs d’une même région. Déplacer chaque copie à travers le réseau étendu gaspille de la bande passante et accroît la latence, même lorsque le réseau fédérateur peut absorber la charge.

Le rapport de recherche appliquée 2024 d’ESnet décrit cinq nœuds de cache régionaux utilisés avec des communautés de données scientifiques. Sur l’ensemble de l’étude, les caches ont réduit le trafic longue distance de 33 téraoctets par jour en moyenne. Deux tiers des requêtes ont été servies localement, et le taux moyen de succès du cache était de 94 %. L’effet variait fortement selon le lieu: la réduction du trafic longue distance atteignait 69,3 % en Californie du Sud, 48,4 % à Chicago et 6,6 % à Boston.

Ces différences sont instructives. La valeur d’un cache dépend de la popularité des jeux de données, de la présence d’utilisateurs locaux, de la taille du stockage, de la politique d’éviction et de la configuration du service. Un cache placé à proximité d’une communauté qui analyse de façon répétée les mêmes données peut supprimer d’importants transferts. Un cache servant des jeux de données divers ou peu re-demandés peut consommer du stockage sans offrir le même bénéfice.

La mise en cache modifie aussi le contrôle. L’opérateur du réseau commence à participer au placement des données, tandis que les communautés scientifiques doivent décider quels jeux de données peuvent être copiés, comment la fraîcheur est maintenue et qui est autorisé à y accéder. Les pannes de stockage et les contenus périmés deviennent des préoccupations opérationnelles adjacentes au réseau.

L’étude montre pourquoi le bit le plus efficace peut être celui qui ne pénètre jamais dans le réseau fédérateur. Les évolutions optiques augmentent l’offre, la mise en cache modifie la demande, la planification des flux de travail peut déplacer les transferts en dehors des périodes chargées, et la compression ou le filtrage local peuvent réduire les données avant leur transmission. Un programme d’infrastructure mature évalue l’ensemble de ces mécanismes, au lieu de ne mesurer les progrès qu’au travers des térabits installés.

Le résultat doit rester circonscrit au déploiement étudié. Il ne prouve pas que chaque jeu de données scientifique atteindra un taux de succès de 94 %, ni que la mise en cache peut remplacer la nouvelle capacité pour des flux en direct uniques. Il apporte la preuve que l’architecture des données et l’architecture du réseau peuvent être conçues ensemble. (Activités de recherche appliquée 2024)

La science transatlantique exige une diversité physique autant que de la capacité

L’empreinte nationale d’ESnet ne peut être dissociée de ses obligations internationales. La physique des hautes énergies est organisée autour d’installations et de centres de calcul des deux côtés de l’Atlantique, et le rapport annuel 2024 attribuait environ la moitié du trafic d’ESnet à l’activité du Grand collisionneur de hadrons. Une défaillance de câble entre l’Europe et l’Amérique du Nord peut donc affecter une charge de travail scientifique centrale, même lorsque tous les routeurs nationaux sont sains.

Au cours de 2024 et du début 2025, ESnet a porté la capacité transatlantique déclarée d’environ 700 Gbit/s à 2,7 Tbit/s. Une part importante du programme a consisté en un accord de 15 ans avec Aqua Comms pour un quart de paire de fibres sur une route reliant New York, Dublin et Londres. ESnet partage également la capacité et les coûts avec GÉANT sur plusieurs systèmes de câbles. L’objectif d’ingénierie est d’au moins 3,2 Tbit/s répartis sur quatre chemins physiquement distincts, la conception sous-jacente offrant un potentiel de croissance au-delà de 10 Tbit/s.

Capacité et diversité résolvent des problèmes différents. Deux services logiques peuvent partager un câble, une station d’atterrissement ou une conduite terrestre et défaillir ensemble. La réparation sous-marine peut nécessiter la localisation de la panne, des permis, un navire câblier, une météo favorable et la récupération physique de la fibre endommagée. La remise en état peut prendre des semaines ou des mois. ESnet planifie donc des scénarios impliquant jusqu’à trois ruptures de câble simultanées, plutôt que de supposer qu’un seul chemin de secours suffit.

Des droits de spectre à long terme donnent à l’installation plus de contrôle sur les évolutions que des achats répétés de circuits finis. Ils créent aussi des engagements envers des systèmes de câbles, des infrastructures d’atterrissement et des partenaires d’exploitation particuliers. ESnet ne supprime pas le risque maritime en louant du spectre. Il gagne la capacité d’ingénierer la capacité et la résilience à travers plusieurs systèmes, tout en restant dépendant des propriétaires de câbles, des processus de réparation et des réseaux partenaires.

C’est un autre endroit où le mot « dédié » appelle de la prudence. ESnet contrôle des droits et des infrastructures dédiés sur des routes importantes, mais le modèle d’actif physique varie. Les chemins nationaux et internationaux peuvent combiner de la fibre noire, du spectre, des services allumés, de la colocalisation et de la capacité partagée. Une ligne sur la carte ne révèle pas la même propriété ni la même autorité de réparation sur chaque segment.

La relation avec GÉANT montre pourquoi la mise en réseau de la recherche est coopérative sans être centralisée. Les deux organisations peuvent partager les coûts et coordonner le trafic scientifique, tout en restant chacune responsable devant ses propres institutions et membres. La performance de bout en bout dépend encore des réseaux nationaux de la recherche, des systèmes de campus et des installations expérimentales, au-delà des deux réseaux fédérateurs. (Jalon transatlantique;Rapport annuel 2024)

La science arrive sous forme de volume régulier, de rafales rares et d’échéances strictes

Le Grand collisionneur de hadrons fournit un volume régulier. Son modèle de calcul distribué déplace les données d’expérience entre le CERN, Fermilab, Brookhaven, les universités et d’autres centres, créant un trafic international soutenu. L’exploitation prévue en haute luminosité devrait accroître la production des détecteurs, la simulation et la réplication. Le réseau doit transporter d’énormes flux routiniers tout en conservant assez de diversité de routes pour survivre à des pannes de câble ou d’installation.

L’observatoire Vera C. Rubin impose une échéance. Le télescope au Chili est conçu pour produire une image d’environ 13 Go toutes les 30 secondes. Le chemin de données soutient un traitement rapide au SLAC et la génération d’alertes sur les objets transitoires afin que d’autres observatoires puissent réagir. ESnet vise à acheminer chaque image sur environ 12 000 milles (≈ 19 300 km) en moins de sept secondes. L’itinéraire inclut des partenaires de réseaux de recherche sud-américains et internationaux, de sorte que le résultat dépend d’une ingénierie coordonnée au-delà du seul domaine d’ESnet.

DUNE représente une rafale exceptionnelle. Lors d’un événement supernova, le programme de neutrinos prévoit de devoir déplacer jusqu’à 600 To en 100 secondes. Son programme plus large, sur vingt ans, devrait générer environ 900 Po. Ce sont des exigences de planification pour une exploitation future, non une description du trafic courant actuel. Elles comptent parce que l’événement ne peut être programmé après que la capacité est devenue disponible. Un réseau dimensionné uniquement sur l’utilisation moyenne pourrait défaillir au moment de la plus forte valeur scientifique.

La recherche sur la fusion combine distance internationale et long horizon de développement. En mai 2026, un test a transféré 176 To de données d’ITER depuis Marseille vers l’installation DIII-D de General Atomics à San Diego à près de 80 Gbit/s. ITER était encore en construction, de sorte que le transfert démontrait l’état de préparation plutôt qu’une production normale à pleine échelle. Les documents de besoins anticipent certains flux de travail futurs autour de deux pétaoctets par jour et d’au moins 200 Gbit/s.

FRIB et Jefferson Lab illustrent un troisième schéma: l’expérience peut avoir besoin d’une analyse distante pendant que les données arrivent encore. EJFAT permet aux flux d’événements d’atteindre le calcul au NERSC ou à Oak Ridge plutôt que d’attendre que des fichiers soient terminés et copiés. Les sources de lumière, les microscopes électroniques et d’autres instruments sont confrontés à des choix analogues concernant le filtrage local, l’inférence distante par IA et la rapidité avec laquelle les résultats doivent revenir à l’opérateur.

Les sciences du climat et de la Terre élargissent encore la demande. De grandes simulations et des jeux de données d’observation se déplacent entre les installations de calcul et de stockage, tandis que des capteurs de terrain peuvent se trouver là où la fibre conventionnelle est indisponible. Aucun débit de pointe unique ne capture l’ensemble de ces besoins. ESnet doit soutenir le transfert soutenu en volume, les rafales rares, le retour d’information à faible latence, la collaboration internationale et l’acquisition distante, le tout dans un modèle d’installation unique. (Étude de cas Rubin Observatory;Étude de cas DUNE;Examens des besoins)

Les examens de besoins transforment les plans scientifiques en architecture réseau

ESnet ne peut pas attendre qu’une expérience produise son premier jeu de données pour commander de la fibre, des routeurs ou de la capacité transatlantique. Les accords longue distance, l’achat d’équipements, la construction de sites et le développement logiciel prennent des années. L’installation mène donc des examens de besoins avec les programmes scientifiques du Département de l’Énergie sur un horizon de cinq à dix ans.

Chercheurs et équipes des installations décrivent les instruments, les volumes de données prévus, les emplacements de stockage, les destinations de calcul, les contraintes temporelles, les collaborateurs internationaux, l’usage du nuage et les besoins de résilience. Les spécialistes réseau et calcul examinent ensuite le flux de travail complet. Une demande de liaison plus large peut révéler un problème plus important au niveau du stockage local, de la diversité des routes, de l’architecture de sécurité ou du logiciel de transfert de données.

Le processus d’examen est une forme de co-conception. Les programmes scientifiques expliquent ce qu’ils essaient d’accomplir; ESnet traduit cet objectif en dépendances d’infrastructure et teste si le chemin proposé peut fonctionner. Le résultat peut influencer le dimensionnement des liaisons de site, de nouvelles routes, les achats sous-marins, le déploiement de Science DMZ, la recherche en orchestration, les effectifs et le calendrier d’une future génération réseau.

Le grand examen de physique des hautes énergies achevé en 2025 et publié en janvier 2026 a mobilisé 127 contributeurs et 14 études de cas dans un rapport d’environ 400 pages. Sa portée n’est pas que chaque prévision sera exacte — les instruments glissent, les logiciels deviennent plus efficaces, de nouvelles charges de travail apparaissent. La valeur est un état documenté dans lequel chercheurs, ingénieurs réseau, centres de calcul et financeurs peuvent voir les mêmes hypothèses et les réviser délibérément.

La prévision reste difficile parce que la demande scientifique est discontinue. Une supernova peut ne jamais se produire pendant la durée de vie d’une expérience, tandis qu’un flux de travail d’IA peut croître plus vite qu’un cycle d’examen formel. La croissance moyenne du trafic est utile pour la budgétisation, mais ne peut remplacer la planification par cas d’usage. L’augmentation inhabituellement faible de 4 % du trafic d’ESnet en 2024 ne montre pas que la demande à long terme s’est arrêtée; elle montre pourquoi une seule année ne doit pas déterminer un programme d’infrastructure sur plusieurs décennies.

Les examens de besoins répartissent aussi la responsabilité. Un laboratoire ne peut supposer que le réseau fédérateur national corrigera un chemin de campus inadéquat, et ESnet ne peut supposer qu’un programme scientifique s’adaptera une fois la capacité construite. Mettre les dépendances dans un plan partagé rend les désaccords ultérieurs plus concrets. (Rapports d’examen des besoins)

Les projets sans-fil et quantiques testent où le périmètre d’ESnet devrait s’arrêter

Un réseau national en fibre atteint bien les institutions fixes. Les instruments scientifiques ne se trouvent pas toujours dans ces lieux. Les champs géothermiques, les observatoires environnementaux et les campagnes temporaires peuvent manquer de couverture opérateur, d’alimentation fiable ou de route fibrée praticable. Le programme Wireless Edge d’ESnet étudie comment les systèmes cellulaires privés, le Wi-Fi, les liaisons radio directionnelles et les satellites peuvent prolonger un flux de travail scientifique jusqu’à ces sites.

Un déploiement géothermique au Nevada médiatisé en juin 2026 combinait de la 4G privée utilisant le spectre Citizens Broadband Radio Service, du Wi-Fi HaLow longue portée, du Wi-Fi classique, une liaison de raccordement Starlink, une radio directionnelle et une tour portable auto-alimentée. La conception répondait aux conditions d’un site de terrain particulier. Il ne s’agissait pas d’un produit sans-fil ESnet général, et elle ne peut offrir la capacité soutenue de la fibre longue distance. Le relief, la météo, le spectre, l’alimentation et le fournisseur satellite font tous partie du chemin de service.

Le point organisationnel important est qu’ESnet ne s’est pas arrêté au point fibré le plus proche en déclarant que le problème restant incombait à quelqu’un d’autre. Sa fonction d’engagement scientifique a traité l’acquisition, le raccordement et le transport étendu comme un seul flux de travail. Cette approche peut être plus précieuse qu’un produit uniforme, car les sites scientifiques distants ont des contraintes physiques différentes.

QUANT-NET explore une autre frontière. Le projet financé par l’ASCR construit un banc d’essai de réseau quantique à trois nœuds reliant le Laboratoire de Berkeley et deux sites de l’Université de Californie à Berkeley sur environ cinq kilomètres. Les travaux incluent des pièges à ions, le couplage de photons, l’échange d’intrication, les mesures d’état de Bell, le contrôle sensible au temps et un cadre logiciel modulaire.

Le lien avec ESnet est principalement le contrôle et l’orchestration. Les expériences quantiques ont besoin de communication classique, de synchronisation précise et de coordination entre des dispositifs encore difficiles à opérer. Un logiciel de contrôle open source peut rendre les expériences plus reproductibles et réduire les réglages manuels. Le banc d’essai n’est pas un Internet quantique de production et ne déplace pas de données scientifiques massives par intrication.

Wireless Edge et QUANT-NET doivent donc être mesurés à l’aune de ce qu’ils enseignent et de ce qui peut être réutilisé. Ni l’un ni l’autre ne démontre que chaque utilisateur d’ESnet recevra un service d’accès sans-fil ou une liaison quantique. Ils étendent la fonction de recherche de l’installation dans des domaines où les futurs réseaux scientifiques pourraient nécessiter de nouveaux supports physiques et systèmes de contrôle. (Déploiement Wireless Edge;Recherche en réseau quantique)

American Science Cloud et ESnet7 font passer la planification des sites aux flux de travail

Le programme Integrated Research Infrastructure et l’émergent American Science Cloud reflètent un changement dans la manière dont le Département de l’Énergie décrit ses installations. Plutôt que de traiter un instrument, un réseau, un entrepôt de données et un supercalculateur comme des services indépendants, les programmes visent à les faire fonctionner comme un environnement fédéré pour les données scientifiques, l’intelligence artificielle et le calcul haute performance.

Le rôle d’ESnet est la couche de connectivité et d’orchestration. Les données doivent circuler des instruments vers le stockage et les accélérateurs; utilisateurs et services ont besoin d’un accès contrôlé; les flux de travail doivent découvrir les ressources disponibles; la télémétrie doit montrer si le système atteint l’objectif scientifique. EJFAT, SENSE, OSCARS, Cloud Connect et High-Touch traitent chacun une partie du problème, mais aucun ne constitue à lui seul l’American Science Cloud.

Lors de Confab26, Inder Monga a été identifié comme chef de projet adjoint de l’American Science Cloud, et les sessions du programme comprenaient des démonstrations et une planification pour la prochaine génération réseau. Cela constitue la preuve d’un travail institutionnel actif, non la démonstration qu’un nuage scientifique universel était achevé en août 2026. La politique d’accès, l’inventaire des ressources connectées, le support en production et la gouvernance restaient des questions en développement.

ESnet7 apparaît dans le même environnement de planification. L’appellation est réelle, et des sessions d’innovation ont examiné la télémétrie, l’inspection des paquets, le déplacement des données, l’intelligence artificielle et la mise en réseau quantique. ESnet6 demeure néanmoins la génération de production actuelle. Aucune architecture publique finale, référence de projet, sélection de fournisseur, budget complet ou date de lancement n’a été identifiée dans les éléments fournis.

Les étiquettes de génération réseau créent des attentes bien avant que l’équipement ne soit installé. Un programme de planification peut orienter les priorités de recherche, l’engagement fournisseur et les demandes de capitaux. Il ne doit pas être présenté comme un réseau fédérateur achevé. L’interprétation la plus défendable est qu’ESnet utilise l’expérience opérationnelle d’ESnet6 et les projets de flux de travail actuels pour décider ce que devrait être une septième génération.

La vitesse restera importante, mais les éléments suggèrent que la programmabilité et l’intelligence pourraient devenir tout aussi centrales. Une liaison plus rapide ne peut pas indiquer à une application où le calcul est disponible, identifier une micro-rafale, planifier un flux de détecteur ou prouver qu’un service interdomaine a été libéré correctement. La question stratégique d’ESnet7 est donc de savoir dans quelle mesure le réseau doit comprendre et coordonner le flux de travail scientifique sans devenir un contrôleur central ingérable. (Programme Confab26;Recherche appliquée 2024)

Le financement fédéral soutient l’installation, mais la ligne budgétaire n’est pas un revenu

ESnet ne finance pas son réseau fédérateur en vendant de la bande passante au public. Le Département de l’Énergie le finance principalement via l’activité ASCR intitulée High Performance Network Facilities and Testbeds. La demande pour l’exercice 2027 proposait 103 millions de dollars pour cette ligne de programme, contre 97,261 millions dans la colonne des crédits précédents.

Ces chiffres fournissent le meilleur indicateur public de l’échelle du programme, mais ils ne constituent pas un compte de résultat d’ESnet. La ligne finance également des bancs d’essai liés au réseau, la maintenance logicielle, des mises à niveau et des activités de recherche. Elle ne détaille pas un coût d’exploitation annuel distinct pour le réseau fédérateur de production, les dépenses d’investissement par génération réseau ou les revenus associés à chaque connexion de site.

Le financement public permet à l’installation d’investir avant que la demande ne devienne commerciale. Elle peut acheter du spectre à long terme, maintenir des outils open source, soutenir des expériences à faible volume mais à haute importance scientifique, et construire une diversité de routes au-delà de ce que l’utilisation immédiate pourrait justifier. Ce même modèle crée une dépendance envers les crédits du Congrès, les priorités du Département et le cadre d’exploitation du Laboratoire de Berkeley.

Les connexions de site ne sont pas toujours gratuites. La politique de coûts des utilisateurs de site d’ESnet permet aux utilisateurs institutionnels de supporter les coûts liés à la connexion en fonction du parrainage, de l’éligibilité et des besoins supplémentaires. L’unité de la relation est le site, non le chercheur individuel. Les utilisateurs finaux ne sont pas facturés séparément ni enregistrés par ESnet.

L’absence de comptes autonomes limite l’analyse financière. Les informations publiques ne révèlent pas de concentration fournisseur complète, de masse salariale, de plan d’amortissement, de registre d’actifs route par route ou de budget d’investissement annuel. Qualifier 103 millions de dollars de « revenu d’ESnet » serait donc incorrect. La conclusion la plus juste est qu’un programme fédéral finance une installation de production, ses travaux d’amélioration, la maintenance logicielle et des bancs d’essai au travers d’une ligne d’activité plus large.

La structure de financement affecte aussi les choix stratégiques. Un réseau commercial peut se retirer d’une route qui ne couvre pas ses coûts. Une installation scientifique publique doit mettre en balance la mission nationale, l’opportunité scientifique et la capacité à long terme avec les contraintes budgétaires. Cela peut justifier un investissement sans retour financier immédiat, mais rend également indispensables une priorisation transparente et des preuves issues des besoins. (Demande budgétaire ASCR 2027;ESCC et politique de site)

Fiabilité et visibilité créent des obligations qui vont au-delà du temps de fonctionnement

Le rapport 2024 d’ESnet note un résultat de disponibilité remarquable: les dix sites de l’Office de la science inclus dans la mesure pertinente ont tous atteint 100 % de disponibilité du service, hors maintenance planifiée. C’était la première année où chaque site dépassait simultanément l’exigence de 99,9 %. Le rapport annuel mentionne aussi un taux de disponibilité global de 99,99 %. Il s’agit de mesures utiles mais de portée différente, non de la preuve que chaque service, chaque institution et chaque chemin international n’a connu aucune interruption.

Le programme de résilience des sites (Site Resilience Program) examine les entrées diversifiées, les routeurs, l’alimentation électrique et les domaines de panne au niveau des installations connectées. Cela reflète une réalité inconfortable: un réseau fédérateur national peut être redondant tandis qu’un laboratoire reste dépendant d’une unique conduite ou d’un seul équipement local. La fiabilité doit atteindre le bâtiment et le système de transfert de données, et non s’arrêter à la carte du réseau fédérateur.

La politique de routage fournit un autre niveau de contrôle. ESnet rejette les annonces RPKI invalides en peering, exige des enregistrements de routage à jour et prend en charge la surveillance des détournements de route et le blackholing de destination. Ces contrôles réduisent des risques connus mais ne peuvent rendre le routage interdomaine infaillible. Une origine de route valide peut encore être associée à une fuite ou à une erreur de politique, et un blackhole protège d’autres systèmes en rendant la destination visée inaccessible.

L’automatisation crée un arbitrage similaire. Une configuration, un inventaire et une orchestration standardisés peuvent réduire l’erreur manuelle et accélérer la remise en état. Un modèle, une politique ou un enregistrement de données erroné peut aussi se propager rapidement à de nombreux équipements. La réponse appropriée consiste en un déploiement progressif, une validation indépendante, des procédures claires de retour arrière ou de remise en état avant, et des limites à l’autorité de tout compte d’automatisation unique.

Les données opérationnelles méritent une attention égale. La politique de données de l’installation d’ESnet indique que les données d’utilisation des routeurs et de NetFlow peuvent être conservées indéfiniment et répliquées sur des stockages des côtes est et ouest. Les mesures actives de perfSONAR sont conservées six mois sur un seul disque, sans sauvegarde. Les données d’utilisation des routeurs et de traceroute sont publiques, tandis que les enregistrements de flux et de sécurité ont un accès restreint.

ESnet peut ne pas avoir de relation individuelle d’abonnement tout en collectant des métadonnées opérationnelles détaillées; ce sont deux systèmes différents. ESnet n’a pas de relation individuelle d’adhésion et de facturation, pourtant les métadonnées réseau peuvent identifier les points d’extrémité, les institutions communicantes, la chronologie et les modèles de trafic. Une télémétrie haute fidélité améliore le diagnostic et la sécurité tout en accroissant le besoin de minimisation, de contrôle d’accès, de révision de la conservation et d’utilisation responsable.

Un modèle de résilience crédible repose sur des mécanismes bornés: diversité physique, ingénierie des sites, sécurité du routage, mesure, réponse aux incidents, gouvernance des données et métriques clairement délimitées. (Jalon de disponibilité;Politique des données de l’installation;Politique de peering)

Le test est de savoir si la science distribuée fonctionne en pratique

L’histoire d’ESnet peut se lire comme une succession de réseaux plus rapides: des prédécesseurs spécialisés, ESnet4, un ESnet5 continental à 100G et l’ESnet6 multi-térabits. Cette chronologie est réelle, mais elle manque la continuité la plus importante. L’installation a modifié à plusieurs reprises l’architecture autour du travail scientifique lorsque la bande passante brute seule ne pouvait résoudre le problème.

Le Science Data Network a séparé les flux exceptionnels du trafic ordinaire. OSCARS a rendu la capacité réservable. Science DMZ a modifié le périmètre institutionnel. perfSONAR et iperf3 ont transformé les conflits de performance en mesures. SENSE a lié l’intention applicative à plusieurs domaines administratifs. EJFAT a fait entrer le chemin étendu dans la boucle de détection. La mise en cache a modifié la demande, et le spectre transatlantique a changé le contrôle d’ESnet sur la croissance internationale.

L’autorité de l’organisation reste bornée. Le DOE et l’ASCR fixent la mission et le financement. Le Laboratoire de Berkeley exploite l’installation. L’Université de Californie gère le laboratoire sous contrat. Les coordinateurs de site approuvent les changements affectant leur établissement. Les partenaires internationaux contrôlent leurs propres réseaux. Les fournisseurs de nuage, les opérateurs, les propriétaires de câbles et les équipementiers conservent un pouvoir sur des composants dont ESnet dépend.

Cette répartition du contrôle n’est pas un inconvénient que le logiciel pourrait effacer. C’est la condition dans laquelle un réseau scientifique opère. La réussite pratique est une coordination suffisamment solide pour fournir un flux de travail sans prétendre qu’une seule institution possède l’intégralité du chemin.

La même discipline doit encadrer les affirmations sur l’avenir. ESnet7 relève de la planification, SENSE était encore en phase de recherche dans le dernier rapport complet, EJFAT est un prototype avancé ou une plateforme émergente, QUANT-NET est expérimental, et l’American Science Cloud était encore en construction. Leur valeur probante est précisément grande lorsque leur maturité est décrite avec exactitude.

L’importance à long terme d’ESnet tient au modèle d’installation utilisateur. Le réseau est traité comme un instrument scientifique avec des besoins, une exploitation, des logiciels, de la mesure, de la recherche et un financement public. Ce modèle reconnaît qu’un détecteur et un supercalculateur séparés par des milliers de kilomètres ne créent que peu de valeur combinée si les systèmes qui les relient ne sont pas conçus comme un chemin unique.

Aucune mesure actuelle neutre dans les éléments fournis ne permet de classer ESnet comme le réseau le plus rapide du monde, et tel n’est pas le test le plus utile. La mesure la plus pertinente est de savoir si un instrument peut atteindre un stockage ou un calcul distant au débit requis, se rétablir lorsqu’une partie du chemin tombe en panne et produire la preuve de l’endroit où se situe la responsabilité. La réputation d’ESnet sera confirmée ou affaiblie par ces résultats de production, à mesure que les travaux de l’American Science Cloud, la diffusion en direct et l’éventuel programme ESnet7 passeront des démonstrations et des plans à un service scientifique soutenu. (Historique ESnet;Lancement ESnet6;Rapport annuel 2024)

Sources

• Gouvernance et politiques ESnet
• Historique ESnet
• Rapport annuel ESnet 2024
• ESnet en chiffres: 2024
• Innovations opérationnelles 2024
• Activités de recherche appliquée 2024
• Jalon transatlantique
• Jalon de disponibilité
• Direction ESnet
• Comité des coordinateurs de site ESnet
• Menu des services réseau
• Connexions de peering et politique de routage
• Politique de gestion des données de l’installation
• Demande budgétaire DOE ASCR 2027
• Lancement ESnet6 au Laboratoire de Berkeley
• Architecture ESnet4 et réseau de données scientifiques
• Lancement continental 100G ESnet5
• Science DMZ
• OSCARS
• SENSE
• EJFAT
• Outils de performance réseau
• Examens des besoins scientifiques
• Déploiement géothermique Wireless Edge
• Recherche en réseau quantique
• Fait marquant FRIB – diffusion directe des données
• Étude de cas Rubin Observatory
• Étude de cas DUNE
• Programme Confab26

Strategic Circle: indicateurs, déclencheurs et scénarios

La prochaine étape d’ESnet doit être évaluée au moyen d’indices opérationnels concrets. Le premier indicateur est une référence formelle pour ESnet7. Un plan de projet financé, une architecture définie, un calendrier d’achat et une méthode de migration feraient passer le programme du stade de l’innovation à celui d’un projet de génération réseau responsable. Tant que ces éléments ne sont pas réunis, ESnet6 reste le système de production et « ESnet7 » est une étiquette de planification.

Le deuxième indicateur est la manière dont le réseau absorbe le prochain cycle de demande scientifique. L’exploitation du LHC à haute luminosité, la mise en service de Rubin, le développement de DUNE, la production de données d’ITER et la croissance des charges de travail d’IA peuvent modifier la forme du trafic autant que son volume. Les indices utiles comprendront les augmentations de débit des liaisons de site, les débits soutenus en production, les tests de rafale, les échéances manquées et le nombre de flux de travail exigeant un transfert en temps réel plutôt que différé.

La résilience internationale doit être suivie séparément de la bande passante agrégée. Atteindre les 3,2 Tbit/s prévus sur quatre chemins transatlantiques véritablement distincts constituerait un jalon significatif. Une panne majeure de câble offrirait un test plus difficile: quelle quantité de trafic peut être rétablie, à quelle vitesse, et quels flux de travail scientifiques sont prioritaires lorsque plusieurs systèmes sont simultanément indisponibles.

Le passage de la recherche au service soutenu est un autre déclencheur. EJFAT franchirait une frontière importante si ESnet publiait un modèle de support en production, des exigences d’intégration et des responsabilités de niveau de service utilisés par plusieurs instruments. SENSE changerait de statut lorsque l’orchestration multi-domaine deviendrait routinière en dehors de démonstrations choisies. High-Touch doit être évalué à l’aune des décisions opérationnelles qu’il améliore et des contrôles régissant les données résultantes, non du seul volume de télémétrie.

Le travail sur l’American Science Cloud exige la même discipline. Un lancement en production devrait définir les utilisateurs éligibles, les ressources de calcul et de stockage connectées, l’identité et l’autorisation, le support de service, la responsabilité des données et le rôle des nuages commerciaux. Les démonstrations indiquent une direction technique. Elles ne répondent pas encore à la question de savoir qui est responsable quand un flux de travail couvre une installation du DOE, ESnet et un fournisseur commercial.

Le financement est un déclencheur concret. La dotation finale pour l’exercice 2027 devra être comparée à la demande de 103 millions de dollars pour les High Performance Network Facilities and Testbeds, tout en gardant à l’esprit que cette ligne est plus large qu’ESnet. Une réduction durable du financement n’interromprait pas nécessairement le trafic actuel immédiatement, mais pourrait retarder les liaisons optiques, la résilience des sites, la maintenance logicielle, le spectre international et ESnet7. Une forte augmentation pourrait accélérer le programme tout en augmentant le risque de poursuivre trop de fronts de recherche simultanément.

Les équipes d’exploitation devraient surveiller le nombre de connexions de site à 400G, l’introduction de services de paquets à 800G ou plus, la croissance des effectifs et l’âge des plates-formes optiques et de routage critiques. Elles devraient aussi surveiller le trafic après la croissance inhabituelle de quatre pour cent enregistrée en 2024. Un retour à une forte croissance validerait une planification de capacité ambitieuse; une croissance plus lente persistante renforcerait l’intérêt de montées en charge sélectives, de la mise en cache et de l’optimisation des flux de travail plutôt que d’une expansion uniforme.

Plusieurs scénarios se dégagent. Dans un scénario d’intégration des flux de travail, ESnet devient la couche de connexion et d’orchestration de l’American Science Cloud, les flux d’instruments en direct et le calcul partagé devenant la conception normale des installations. Dans un scénario de contrainte de capacité, la science internationale croît plus vite que la diversité sous-marine et impose des choix de priorité. Dans un scénario de goulot d’étranglement au niveau des sites, le réseau fédérateur national évolue avec succès tandis que le stockage local, les pare-feu et les liaisons de campus restent le facteur limitant.

Dans un scénario de contrainte budgétaire, ESnet6 vit plus longtemps et les logiciels, les mises à niveau d’optiques cohérentes et la mise en cache supportent une plus grande part de la charge. Les travaux sans-fil et quantiques pourraient produire des systèmes de contrôle réutilisables sans devenir des services de production grand public durant la prochaine génération.

Pour les responsables de laboratoire, l’implication professionnelle est simple: une montée en gamme ESnet ne remplace pas l’ingénierie locale. La résilience du site, la conception Science DMZ, les nœuds de transfert de données, le stockage et la mesure doivent être financés comme faisant partie de la même capacité scientifique. Pour les responsables de programme, la question pertinente est de savoir si un instrument prévu dispose d’un flux de travail de bout en bout exécutable, et non si une diapositive de réseau fédérateur national montre une capacité suffisante.

Leadership Alliance: contrôle, incitations et décisions irréversibles

La structure de contrôle d’ESnet est répartie entre des institutions aux incitations différentes. Le Département de l’Énergie et l’ASCR définissent la mission et allouent les fonds fédéraux. La Division des réseaux scientifiques du Laboratoire de Berkeley conçoit et exploite l’installation. L’Université de Californie fournit le cadre d’exploitation du laboratoire. La direction d’ESnet répartit l’attention d’ingénierie entre l’exploitation, la sécurité, les logiciels, la recherche et l’engagement scientifique. Les coordinateurs de site contrôlent les changements qui affectent leurs propres connexions.

Les programmes scientifiques formulent les besoins futurs, tandis que les réseaux partenaires, les fournisseurs de câbles, les entreprises de nuage et les équipementiers contrôlent des parties du système de bout en bout.

Cette structure empêche un acteur unique de commander l’intégralité du chemin scientifique, mais elle peut aussi rendre ambiguë la responsabilité en cas de défaillance. Un programme central peut financer un réseau fédérateur sans corriger une installation locale. Un laboratoire peut demander de la capacité sans préparer le stockage. Un fournisseur de nuage peut délivrer une interconnexion privée tout en conservant le contrôle de la disponibilité régionale et des tarifs. Une direction efficace repose donc sur l’explicitation des frontières et l’exigence de preuves à chaque interface.

La première décision est de savoir quelle autorité le réseau doit acquérir sur le flux de travail. Plus d’orchestration peut allouer efficacement la capacité, le stockage et le calcul. Elle peut aussi concentrer les habilitations et créer un large rayon d’action pour l’automatisation. Une conception prudente conserve la propriété des politiques aux institutions qui en assument les conséquences, expose des capacités restreintes au travers d’interfaces authentifiées et exige une vérification indépendante avant les changements à fort impact.

La deuxième décision concerne l’endroit où engager du capital de manière irréversible. Les droits de fibre et de spectre, les accords d’atterrissement, les plates-formes optiques et la construction de sites peuvent façonner le réseau pour quinze ans ou plus. Attendre préserve la flexibilité mais comporte le risque de ne pas pouvoir obtenir de capacité lorsqu’une expérience commence. Un engagement précoce garantit le contrôle mais peut immobiliser l’investissement si les calendriers scientifiques ou les technologies changent.

Les examens des besoins sont précieux parce qu’ils relient ces engagements à des flux de travail identifiés plutôt que de traiter la croissance comme une courbe générique.

La troisième décision concerne les données. La conservation indéfinie des flux et une télémétrie haute fidélité peuvent améliorer la réponse aux incidents, la planification de la capacité et la sécurité. Elles créent aussi des enregistrements durables des relations scientifiques et du comportement des points d’extrémité. La direction doit distinguer les données indispensables à la continuité des données conservées simplement parce que le stockage est disponible, documenter l’accès et l’usage, et examiner si la conservation indéfinie reste proportionnée à mesure que la télémétrie devient plus détaillée.

La quatrième décision est la frontière entre l’infrastructure publique et les services commerciaux. Cloud Connect peut offrir aux chercheurs des chemins privés vers des ressources puissantes, mais la configuration du compte nuage, la sécurité, les tarifs de sortie et la disponibilité du service restent des dépendances externes. ESnet doit rendre ces dépendances lisibles plutôt que de laisser un chemin privé être confondu avec un contrôle public de l’intégralité du service.

Les effets de second ordre comptent. Si la diffusion en continu en direct devient la norme, les installations peuvent construire moins de calcul local et devenir plus dépendantes du réseau étendu et des ordonnanceurs nationaux. Cela peut améliorer l’utilisation tout en transformant un incident du réseau fédérateur en incident d’expérience. Si l’orchestration pilotée par les applications devient normale, les logiciels scientifiques peuvent commencer à supposer que la capacité peut être réservée dynamiquement, rendant le repli manuel plus difficile.

Si les caches et le stockage partagé se développent, la politique de placement des données devient une question de gouvernance de l’infrastructure.

Les effets de troisième ordre touchent l’organisation de la science. Un chemin fiable de l’instrument au supercalculateur permet à de plus petites installations d’utiliser des capacités qu’elles ne pourraient pas financer localement. Il peut élargir l’accès, mais peut aussi concentrer le calcul essentiel dans quelques centres nationaux. Les flux de travail d’IA peuvent accroître la demande d’accélérateurs partagés et donner aux décisions de réseau une influence plus grande sur les expériences qui reçoivent une analyse en temps opportun.

Le risque irréversible le plus grave n’est pas une mise à niveau échouée. C’est la conception d’un écosystème scientifique dont les composants ne peuvent plus fonctionner de manière suffisamment indépendante pour se rétablir. ESnet doit approfondir l’intégration tout en préservant des frontières observables, un repli local, la diversité des routes, des interfaces ouvertes et la capacité de remplacer un fournisseur ou un service. L’histoire de l’installation soutient cette approche: ses contributions les plus fortes n’ont pas centralisé chaque décision.

Elles ont rendu l’infrastructure partagée programmable et mesurable tout en maintenant la responsabilité visible.

La direction devrait donc juger ESnet selon trois résultats. Les programmes scientifiques doivent recevoir une capacité de bout en bout fiable, plutôt qu’une bande passante nominale. L’investissement doit préserver des options sur la longue durée de vie des actifs. L’automatisation et la télémétrie doivent accroître les preuves opérationnelles sans placer une autorité non révisable dans un seul système. Ces tests sont moins spectaculaires qu’une étiquette de « réseau le plus rapide du monde », mais ils déterminent si le réseau reste utile lorsque la demande scientifique, la technologie et les priorités publiques évoluent.