ESnet――遠隔研究施設を一つの科学システムとして結ぶネットワーク

要約

Energy Sciences Network（ESnet）は、米国エネルギー省科学局の科学ネットワーク施設であり、Lawrence Berkeley National Laboratoryが運用する。商用通信事業者でも独立法人でもなく、連邦資金で支えられる科学インフラである。
ESnet6は、約1万5,000マイルの専用ファイバー基盤、光伝送、パケットルーティング、プライベートネットワーク、クラウドおよび研究教育ネットワークとの相互接続、計測、プログラマブルサービスを組み合わせる。2024年報告の57 Tbpsは集約容量、1.77エクサバイトは年間トラフィックであり、全利用者に57 Tbpsの経路が提供されるという意味ではない。
ESnetの重要な貢献は、ネットワーク性能をエンドツーエンドの問題として扱ってきたことにある。Science DMZ、perfSONAR、iperf3、OSCARS、SENSE、High-Touch、EJFATは、ローカルシステム、ネットワーク予約、テレメトリー、ライブデータ処理を改善し、バックボーン容量を実際の科学成果へ結び付ける。
次の段階は単なる高速化ではない。American Science Cloud、Integrated Research Infrastructure、ESnet7の計画、装置からのリアルタイムストリーミング、野外無線、量子ネットワーク制御は、ネットワークを科学ワークフローへ直接組み込もうとしている。ただし成熟度は異なり、計画や実証を広く利用可能な本番サービスとして扱うことはできない。

小売ISPではなく、科学のためのネットワーク

ESnetを理解する最も分かりやすい方法は、一つの科学データが移動する経路を追うことである。検出器、望遠鏡、顕微鏡、シミュレーションが研究施設で情報を生み、収集システムが受け取り、ストレージや転送サーバーが移動に備えて整える。ローカルネットワークがデータを管理された境界まで運び、その先でESnetが米国内、大西洋を越えた研究施設、米国エネルギー省のスーパーコンピューター、研究教育ネットワーク、商用クラウドへ送る。戻ってくるのは解析済みデータ、警報、モデル、あるいは実験の次の操作を決めるための情報である。

この全経路を単一の組織が支配するわけではない。装置チーム、研究所LAN、地域研究ネットワーク、クラウド事業者、国際パートナー、スーパーコンピューティング施設は、それぞれ別の運営主体である可能性が高い。ESnetは科学ミッションに特化した広域ネットワーク層を提供し、他の運営者と連携して経路全体を機能させる。低速なストレージ、混雑したキャンパス回線、不適切なファイアウォールは高速な全国バックボーンを無駄にし、ESnet側の障害は適切に設計されたローカル施設を止め得る。

制度上の位置付けも明確である。ESnetは米国エネルギー省科学局のユーザー施設であり、主としてAdvanced Scientific Computing Research（ASCR）の資金と監督を受け、Berkeley LabのScientific Networking Divisionが運用する。Berkeley Lab自体は、University of Californiaが米国エネルギー省との契約に基づいて運営している。ESnetには株主、上場株式、独立した企業価値、商用企業としての単独財務諸表がない。したがって、ネットワークサービスを販売する企業ではなく、連邦政府の科学インフラとして説明すべきである。

研究者は通常、ESnetと直接契約しない。科学装置、スーパーコンピューター、研究所サービス、大学ネットワーク、共同研究ネットワークを使う過程で、そのトラフィックがESnetを通過する。ESnetは機関としてのsite userとendpoint userを区別し、個々のエンドユーザーを加入者として正式に登録・追跡していない。2024年年次報告の「3万人超の組織ユーザー」は、特定時点の制度的な規模を示す数字であり、個人加入者数ではない。

この運用モデルを考えると、通常の通信事業者との比較だけではESnetの役割を捉えられない。ESnetは光伝送、ルーティング、相互接続を運用する一方、要件レビュー、オープンソース開発、実験的サービス、サイトの性能改善にも取り組む。提供しているのは小売回線ではない。離れた科学施設を一つの共有システムとして機能させる能力である。(ESnetガバナンス; ネットワークサービス)

原点は希少な大型計算機と音響モデムだった

ESnetの公式史は1970年代半ばに遡る。当時、計算機も長距離通信も希少だった。Lawrence Livermore National LaboratoryのControlled Thermonuclear Research Computer Centerでは、借用したControl Data Corporation 6600を4台の音響モデムで接続した。機器と速度は別の時代のものだが、運用上の問題は現在にも通じる。専門的な科学共同体が、各機関では複製できない高価な計算資源へ遠隔アクセスする必要があった。

1970年代末から1980年代初めにかけ、米国エネルギー省内の異なる研究分野は独自のネットワークを構築した。高エネルギー物理と磁気核融合では、施設、共同研究先、データフローが異なり、HEPnetやMFEnetがそれぞれの境界を反映していた。商用サービスが必要な到達範囲、性能、運用支援を提供できない状況では、専用ネットワークは合理的だった。一方で、各プログラムが個別に回線を調達し、技術と専門人材を維持したため、投資と運用が重複し、長期的な更新や分野間連携は断片化した。

1986年のESnet正式発足は、こうした機能をより広い科学ネットワークへ統合した。変化は技術だけでなく組織的なものだった。共通施設は複数プログラムの需要を予測し、全国回線を運用し、国際接続を調整し、専門人材を維持できる。容量は個々の実験の問題から、米国エネルギー省全体のインフラ計画へ移った。

初期モデルには、現在も続く特徴がすでに表れていた。利用者は小売市場ではなく科学ミッションによって定義され、中央の計算機や科学装置が共有の公共投資を正当化した。ネットワーク設計は長期の研究計画に従い、運用には通信技術と障害の科学的影響の双方を理解する人材が必要だった。需要は均等ではなく、一つの実験が通常の水準を大きく上回るトラフィックを生む可能性があった。

Berkeley Labにも独自のネットワーク研究の系譜があった。1974年にはCDC 6600をARPANETへ接続し、その後、研究者がTCPの輻輳制御に関する基礎的研究へ貢献した。Van JacobsonとMike Karelsの成果はBerkeley Lab全体の研究環境に属し、ESnetだけの成果として扱うべきではない。それでも、プロトコルの挙動、計測、性能を研究可能な工学課題として扱う文化は、ESnetの運用思想と近い位置にあった。

ESnetの運用は1996年にBerkeley Labへ移管された。これにより、National Energy Research Scientific Computing Center（NERSC）、ネットワーク研究者、ソフトウェア技術者、その他の米国エネルギー省プログラムと同じ環境に現在の運用拠点が置かれた。本番ネットワークと応用研究組織が人材、研究設備、技術課題を共有する現在の形は、ここで定着した。(ESnetの歴史)

なぜネットワークが科学ユーザー施設になったのか

科学ユーザー施設は、各研究グループが単独で構築するには高価、専門的、または相互依存が大きすぎる能力を共有するために存在する。粒子加速器、光源、スーパーコンピューターと同様に、ESnetはこの考え方を通信へ適用する。長距離ファイバー権、光装置、ルーター、国際容量、常時運用、サイバーセキュリティ、性能計測、技術支援を一つの施設へ集約し、複数の科学プログラムが利用する。

科学需要の形が公共資金の必要性を説明する。商用通信事業者は高容量回線を販売できるが、数年後に運用を始める検出器、契約期間中に発生するか分からない超新星、商用トラフィックは小さくても公共的価値の高い科学ワークフローを基準に全国ネットワークを設計するとは限らない。ESnetは実測需要が現れる前に投資できる。短期のネットワーク収益ではなく、科学能力を提供することが使命だからである。

ユーザー施設のモデルは、需要を把握する方法も変える。ESnetは米国エネルギー省の科学プログラムと正式な要件レビューを行う。研究者と施設チームは、5年から10年先の装置、データ量、保存場所、計算先、時間制約、共同研究の構造、ローカルボトルネックを説明する。その結果は、サイト接続容量、経路多様性、大西洋横断容量、オーケストレーション研究、サービス設計の判断材料になる。

この作業は新しい光回線ほど目立たないが、より重要な場合がある。海底スペクトラム契約、ルーター調達、サイトへの第二の物理入口は、資金確保から導入まで数年を要する可能性がある。実験がデータを出し始めてから準備すれば、予測可能だったインフラ需要が緊急事態になる。要件レビューは、科学計画を工学的な準備期間へ変換する。

同時に、要件レビューは不確実性を明示する。装置のスケジュールは遅れ、データ削減ソフトウェアは改善し、クラウド利用は拡大し、施設がワークフローを設計し直すこともある。ESnetは一つのケーススタディを確定したトラフィック注文として扱わない。複数の想定を作り、柔軟性、予備容量、段階的な導入が必要な場所を判断する。

このモデルでは、研究者個人へギガバイト単位で請求しない。中核運用は連邦資金で支えられ、一部のサイト接続費用はプログラムのスポンサーシップやSite User Cost Policyに基づいて負担される場合がある。ただし、インセンティブの違いは残る。スポンサーとなるプログラムは低い接続費を望み、ESnetは複数プログラムへ役立つ容量とレジリエンスを求め、サイトは全国ネットワークを十分に利用するためのローカル更新を先送りする可能性がある。ガバナンスの役割は、費用を別の予算項目へ移すことではなく、こうした判断を科学成果へ結び付けることである。(ESnet Site Coordinators Committeeと費用方針; 要件レビュー報告)

Berkeley Labが運用し、DOEが使命を定める

ESnetには通信事業者のような企業階層がない。権限は連邦プログラムの連鎖に分散している。米国エネルギー省科学局が使命を定め、Advanced Scientific Computing Researchが主なプログラム監督と予算管理を担う。Berkeley LabのScientific Networking Divisionが施設を設計、運用、開発し、University of Californiaが米国エネルギー省との契約に基づいてBerkeley Labを運営する。接続機関は、サイトコーディネーターとESnet Site Coordinators Committeeを通じて参加する。

Inder MongaはESnetのExecutive Directorであり、Berkeley LabのScientific Networking Divisionを率いる。公開されているリーダーシップ情報では、Chin GuokがChief Technology Officer兼Planning and Innovation責任者、Adam SlagellがChief Security Officer、Jon-Paul HerronがDirector of Network Engineering、Susan LucasがDeputy of Business Operationsを務める。その下には、光工学、ルーティング、サイト工学、ネットワーク運用、ソフトウェア、計測、オーケストレーション、セキュリティ、プロジェクト管理、科学連携の機能がある。

この組織の広さは、全国ネットワークをファイバーとルーターの集合として見る単純な理解を修正する。ESnetには、スペクトラムを調達し、BGPを運用し、テレメトリーを構築し、オープンソースソフトウェアを保守し、パケット挙動を調査し、施設を計画し、セキュリティ情報を管理し、科学要件をネットワーク設計へ翻訳できる人材が必要である。ESnetは運用組織であると同時に開発組織でもある。

公開情報には、プログラム管理に関する未解決の相違がある。現在のESnetガバナンスページはBenjamin BrownをASCRのprogramme managerとして記載する一方、最近の要件レビュー資料はCarol HawkをESnet programme managerとして記載している。公開情報が同時に更新されていない、担当が移行した、または役割が分担されている可能性がある。追加の公式確認なしに、どちらか一人を唯一の現担当者と断定することはできない。

ESnet Site Coordinators Committeeは、接続機関に正式な運用窓口を提供する。各サイトは、自機関の接続に影響する申請を承認し、要件を伝え、方針や計画の議論へ参加する担当者を置く。これは機関単位のユーザーガバナンスであり、ネットワークを利用する研究者一人ひとりの直接投票ではない。

この仕組みは、責任の実務的な分担を作る。ESnetは自らのバックボーンとサービスを管理する。接続サイトはキャンパス機器、Data Transfer Node、ローカルセキュリティ、電力を管理する。ASCRはプログラムレベルの資金を管理し、科学プログラムは遅延や障害の影響を定義する。国際パートナーは自らのネットワークを管理する。完全なワークフローが機能するには、こうした異なる意思決定領域が整合していなければならない。(ESnetリーダーシップ; ガバナンス)

ESnet4は一般IP通信と巨大な科学フローを分けた

2000年代半ばになると、分散型実験がネットワークトラフィックの性質を変え始めた。Large Hadron ColliderはCERNでデータを生成し、世界各地の研究所と計算センターへ配布することになっていた。一般的なインターネット接続は引き続き必要だったが、少数の科学転送が通常のリンクを占有するほど大きくなる可能性があった。二つのパターンを一つの均質なネットワークで処理すると、容量管理とサービス保証が難しくなる。

ESnet4はハイブリッドアーキテクチャで対応した。一般的な科学通信をIPコアが運び、大容量の科学フローには別のScience Data Networkが高容量光回線を提供した。主要研究所はメトロリングで接続され、Internet2や国際パートナーとの協力が米国エネルギー省のサイト外へネットワークを延長した。

違いは、単純な「遅い通信」と「速い通信」ではなかった。一般IPサービスには広い到達性と柔軟なルーティングが必要である。一方、計画された複数テラバイトの転送には、開始時刻、帯域、エンドポイントが明確な予約済みLayer 2経路が適している場合がある。Science Data Networkは、少数の予測可能で価値の高いフローには、通常のパケット転送とは異なる制御モデルが必要だと認識した。

OSCARSはこの環境から生まれた。On-demand Secure Circuits and Advance Reservation Systemは、認可されたユーザーやアプリケーションが、指定した期間のネットワーク資源を要求できるようにした。システムは経路を探索し、トポロジーとポリシー上の制約を確認し、帯域とVLAN資源を予約し、装置へ状態を設定し、予約終了時にその状態を削除する。以前は技術者の手動調整に頼っていた作業が、ソフトウェアから要求できるサービスになった。

ESnet4は、純粋な速度が唯一のボトルネックではないことも示した。予約済み回線が広域ネットワーク上の容量を確保しても、ストレージが十分な速度でデータを読み出せない、またはローカルのファイアウォールがパケットを破棄すれば、アプリケーションは遅いままである。この経験がScience DMZとエンドツーエンド計測へ直接つながった。

この時期に、ESnetの繰り返し現れる設計パターンが確立された。科学上の問題がまずトラフィック要件として現れ、施設が物理容量、制御機構、運用方法をまとめて構築する。その方法が有効だと確認されると、ソフトウェアと設計指針が元の実験を超えて広がる。(ESnet4資料; OSCARS)

Science DMZは組織境界のボトルネックを明らかにした

全国バックボーンが正常でも、研究者の転送性能が低いことはある。バックボーンは経路の一部にすぎないからである。汎用ファイアウォール、共有キャンパスコア、古いルーター、性能不足のサーバー、パケット損失、ストレージの制約が、高容量回線の実効速度を大きく下げる。

Science DMZは、このエンドツーエンド問題に対するESnetの回答である。高性能なData Transfer Nodeを、管理された組織境界の近くにある専用経路へ置く。セキュリティポリシーは、持続的な科学転送を多目的のstateful firewallへ通すのではなく、限定されたサービスを提供する専門システムへ合わせて設計される。

Science DMZという名称は、セキュリティを外す構想だと誤解されることがある。しかし実際には、強化されたホスト、ルーターのアクセス制御リスト、監視、脆弱性管理、限定されたアプリケーション公開、運用規律が必要である。設計が変えるのは制御の場所と方法であり、セキュリティ上の責任を消すことではない。

性能計測は、任意のダッシュボードではなくアーキテクチャの一部である。perfSONARノードは、スループット、パケット損失、遅延、経路変化を制御された条件で測る。二つのサイトが転送障害について異なる見方をしている場合、問題がホスト、ローカル回線、地域ネットワーク、ESnetバックボーン、国際パートナーのどこで始まるかを絞り込める。測定がなければ、各運営者が自分の区間は正常だと報告する一方、研究者はデータを移動できないままになる。

Data Transfer Nodeにも専門的な工学が必要である。ネットワークインターフェース、CPU配置、メモリ、ディスクまたは並列ファイルシステム、TCPバッファ、転送ソフトウェアが実効スループットを左右する。ESnetのFasterdataガイダンスと技術支援は、これらを再現可能な実務へ変換した。このアプローチは米国エネルギー省の施設外にも広がったが、Science DMZを名乗るすべての実装をESnetが運用しているわけではない。

Science DMZが広く受け入れられた理由は、設備購入の問題をシステム設計の問題へ変えたことにある。より速い回線を購入しても、別の区間が制約になっていれば解決しない。意味のある性能単位は、ストレージからストレージ、または装置から計算資源までの完全なワークフローであり、各管理ドメインを測定して責任を明確にする必要がある。(Science DMZ; 性能ツール)

ESnet5は全米規模の100Gを本番化した

次の容量転換は、Advanced Networking Initiativeと米国の景気刺激策によって支えられた。ESnetはAmerican Recovery and Reinvestment Actを通じて6,200万ドルを受け、100 Gbpsの長距離プロトタイプとESnet5への移行を進めた。投資は新しいルーターだけではなく、全国ファイバー上のスペクトラム権を含み、ESnetは波長の導入と更新をより直接制御できるようになった。

ESnet5は2012年末に本番運用へ入った。当時、米国エネルギー省とESnetはこれを世界最速の科学ネットワークと表現した。この歴史的主張は、先駆的な全米100G本番展開という文脈で理解すべきである。2026年の世界ランキングとして無条件に繰り返すことはできない。現在の研究ネットワークは、個別インターフェース速度、バックボーンの集約容量、光スペクトラム、実験的試験など異なる指標を公表しており、提供された資料には中立的な比較基準がない。

100Gの効果は、インターフェース速度が10倍になったこと以上だった。以前なら回線を長時間占有していた科学データを、日常的な長距離転送として計画できるようになった。研究所は一部の計算やストレージを中央集約し、各地で複製せずに済む可能性を得た。国際共同研究には、より能力の高い米国内バックボーンが提供された。同時に、容量増加はローカルの制約を早く露出させ、Science DMZとperfSONARの価値を高めた。

ESnet5は、パケットサービスと科学向け専用経路のハイブリッド構成を維持した。自動化の重要性も増した。100G規模では、容量予約、障害診断、全国規模で一貫したサービスを維持する作業を、装置ごとの手動設定だけに依存できない。

このプロジェクトは、公共インフラ投資が単一の実験による全面利用より前に科学の選択肢を変えることを示した。予備容量は将来の装置や障害へ備えるものであり、小売サービスの売れ残りと同じ意味での無駄ではない。新たなワークフローを次の建設サイクルまで待たずに試せることも、その価値に含まれる。

ただし、この論理には規律が必要である。容量の見出しは実際の科学利用へ結び付けられなければならず、需要予測が変わった場合にも投資を適応できる必要がある。ESnetが後に進めたテレメトリー、キャッシュ、オーケストレーションは、物理的な増強だけを答えとせず、設置済み容量からより多くの科学価値を得る試みである。(ESnet5発表)

ESnet6は光、パケット、ソフトウェアを一体化した

ESnet6プロジェクトは2017年に始まり、約6年の設計と建設を経て2022年10月11日に公開された。Berkeley Labは開始時点で、約1万5,000マイルの専用インフラ上に46 Tbps超の集約容量があり、バックボーンリンクは400 Gbpsから1 Tbpsだと発表した。2024年年次報告は、その後の拡張を反映して57 Tbps、最大1.2 Tbpsのリンクを記載した。これらは異なる時点の数字であり、静止した一つのネットワークについて矛盾する定義ではない。

物理層には、長距離ファイバー、光ラインシステム、増幅器、スペクトラム権、コロケーション施設、ローカル接続点が含まれる。2024年報告は278の光増幅拠点を数えた。コヒーレント光技術が複数の高速チャネルをファイバー上で運び、増幅器と再構成可能な光装置が信号を維持し、波長を適切な方向へ送る。地図上の一つの経路も、Dark Fiber、スペクトラム、Lit Service、パートナー契約など異なる形で構成され得る。約1万5,000マイルという表現は、米国エネルギー省が全ケーブルを法的に所有することを意味しない。

光層の上では、ルーターとサービスエッジがIP、プライベートルーティング環境、Layer 2サービス、ピアリング、クラウド接続を提供する。2024年報告は78のルーター拠点を記載した。各サイトは要件に応じて10、100、400 Gbpsで接続され、バックボーンは複数のインターフェースや波長を集約して、より大きな容量を構成できる。

ソフトウェア層が、ESnet6を単なる容量増強と区別する。自動化は装置とサービスの状態を維持し、プログラマブルテレメトリーがより詳しい運用証拠を提供する。OSCARSは予約済み経路を設定し、SENSEは複数ドメインをまたぐアプリケーション主導の調整を試みる。High-Touchはプログラマブルハードウェアによってパケットとフローの詳細な可視性を作る。APIやtestbedとの接点は、有効だった研究成果を本番運用へ近付ける。

ESnet6ではレジリエンスも重視された。多様な経路、複数のサイト入口、独立電源、代替ルーター、高可用性サービス拠点は、一つの障害で研究所が全国システムから切り離される可能性を下げる。ただし、各対策の対象範囲は異なる。二つのローカル回線が同じダクトを通っていれば、冗長なバックボーンは役に立たない。二台のルーターが同じ電源に依存すれば、装置数を増やしてもレジリエンスは得られない。

ESnet6は、層を重ねた科学施設として理解すべきである。ファイバーが物理的な到達範囲を作り、光装置が容量を作る。ルーターがパケットサービスとプライベートサービスを作り、ソフトウェアが反復可能性とプログラム可能性を提供する。計測は、約束された経路が本当に機能するかを確認する。組織間の契約と協力は、ESnetが所有しない境界を越えるために必要である。(ESnet6開始; 2024年年次報告)

57 Tbpsが意味すること、意味しないこと

ネットワーク統計は、異なる層を一つの数字へまとめがちである。ESnetが2024年について示した57 Tbpsは、システム全体に分散した設計容量の集約値である。一つの物理リンク、すべての研究所が利用できるスループット、または常時流れているトラフィックを意味しない。同じ報告は、400 Gbpsから1.2 Tbpsのバックボーンリンク、400G以上で接続された米国内7サイト、2.7 Tbpsの大西洋横断容量も記載している。それぞれ別の問いに答える数字である。

同報告は、約1万5,000マイルのインフラ上に78のルーター拠点と278の光増幅拠点があるとした。ネットワークは米国エネルギー省の17国立研究所すべてを接続し、28のDOE user facility、5か国にまたがる研究教育・商用・その他のネットワーク関係277件、3万人超の組織ユーザー、24州に分散する職員・請負人137人を報告した。これらは異なる母集団であり、顧客総数として合計してはならない。ルーター、施設、パートナーネットワーク、機関利用者、従業員はそれぞれ別の指標である。

サイト接続は、一つの機関境界での容量を示す。バックボーンリンクはネットワーク拠点間の容量を示す。光システムは複数波長を運び、論理サービスは物理層の一部だけを使うことがある。集約容量は、同一の送信元と宛先が同時に利用できない複数の資源を合計した値である。トラフィック量は一定期間に移動したデータ量を示し、ある瞬間の最大速度とは異なる。

ESnetは2024年に1.77エクサバイトを運び、2023年の1.7エクサバイトから4％増加した。この伸びは、ESnetが1989年以来の長期平均として示す年約55％と比べて低い。単年の結果だけで科学需要が安定したとは言えない。大規模プロジェクトは不均等に稼働を始め、ソフトウェア変更が転送量を減らすこともあり、一つの実験や国際イベントが構成を大きく変える可能性もある。

トラフィックは均等でもない。2024年報告はLarge Hadron Collider関連が総トラフィックのおよそ半分を占めたとした。Fermilabは136ペタバイトで最大の外部送信元、NERSCは75.3ペタバイトで米国エネルギー省内最大の受信先、Oak Ridgeは58.3ペタバイトで同省内最大の送信元だった。これらは主要なワークロードを示すが、科学価値の完全なランキングではない。より小さな転送でも、時間制約が厳しい、または固有の装置を支える場合がある。

容量計画には、平均とピークのトラフィック、経路別利用率、障害時の予備容量、サイト接続速度、科学上の期限、将来要件を同時に見る必要がある。平均利用だけを基準にしたネットワークは、超新星や海底ケーブル障害の際に不足する可能性がある。理論上最大のイベントだけを基準にすれば、高価で柔軟性の低い資産を過剰に作るおそれがある。

ESnetの工学課題は、必要なワークフローから到達できる場所へ容量を置き、両端のシステムがその容量を実際に使えるか確認することである。そのため、57 Tbpsという数字はScience DMZ、計測、オーケストレーション、要件レビューとともに説明すべきであり、それ自体を世界ランキングのように扱うべきではない。(ESnet by the Numbers)

AS293は小売市場ではなく科学ミッションのためにルーティングする

ESnetの公開Autonomous System NumberはAS293である。米国エネルギー省のサイト、研究教育ネットワーク、商用ネットワーク、有料トランジット事業者と経路を交換する。ルーティングポリシーは、どの経路が科学トラフィックを運び、障害時にどのように切り替え、どの外部ネットワークと直接接続するかを決める。

ピアリングポリシーは選択的である。候補ネットワークはBGPを使用し、Internet Routing RegistryとPeeringDBの情報を最新に保ち、RPKI-invalidの経路を避け、MANRSに関連するルーティングセキュリティ実務に従う必要がある。ESnetはIPv6またはデュアルスタックのピアリングを求め、新規のIPv4のみの関係は受け付けない。直接のprivate interconnectionは100Gポートからで、400Gが強く推奨される。

この条件は、ミッションと運用コストの双方を反映する。直接接続はポート、技術者の時間、監視能力を消費する。ESnetは、公開経路が存在するという理由だけですべてのネットワークとピアリングする必要はない。米国エネルギー省の科学経路を改善し、トランジット依存を減らし、主要共同研究先へつながる関係を選ぶ。研究ネットワークや直接ピアリングで効率よく到達できない宛先には、Hurricane ElectricとLumenの有料トランジットを利用する。

ESnetは、直結サイト、研究教育ネットワーク、商用ネットワークを区別するBGP Communityを公開している。接続機関はその情報をポリシーへ利用できるが、下流のネットワークが同じ意味で解釈するかはESnetの管理外である。Communityは記述的なメタデータであり、すべてのネットワークが同一のルーティング判断をする保証ではない。

ルーティングセキュリティにも限界がある。RPKI-invalidの経路を拒否すれば、誤ったオリジンの重要な一部を防げるが、すべてのroute leak、侵害されたpeer、正しいオリジンから誤って流された経路、不適切なROAを止められるわけではない。Hijack監視は予期しないオリジン変化を見付けられるが、検出は伝播後になる場合がある。Blackholingは攻撃対象へのトラフィックを破棄して他のシステムを守るが、対象プレフィックスの到達性を犠牲にする。

AS293は公開IPトラフィックを運ぶが、消費者向けトランジット市場で顧客数を最大化することを目的としていない。価値は、科学共同体へ提供する経路の質、障害時の回復力、信頼できる相互接続にある。(ピアリングポリシー)

物理接続、プライベートサービス、クラウドへの経路

ESnetのサービスは物理接続から始まる。対象サイトは、近隣または遠隔のPoint of Presenceを通じて10、100、400 Gbpsで接続できる。専用インフラから離れた施設では、Service On-RampがDark Fiberまたは通信事業者のLit Circuitを利用する場合がある。アクセス経路も科学ワークフローの一部であり、外部事業者が提供する最後の区間が主要なボトルネックや障害点になる可能性がある。

Layer 3 IPサービスはIPv4とIPv6のルーティング接続を提供する。Layer 3 VPNは、共有物理基盤上に、複数サイトを持つ科学プログラム向けの論理的に分離されたIPとBGP環境を作る。Layer 2 VPNは、ポイントツーポイントまたはマルチポイントのEthernet接続を提供し、静的またはOSCARSによって設定される。こうしたサービスにより、実験や施設はすべての関係を公開インターネットへ露出せずに接続できる。

プライベートサービスは、物理的に完全に独立したサービスを意味しない。論理分離は、ルーター設定、ラベル、ルーティングインスタンス、アクセス制御、運用手順に依存する。共有プラットフォームの障害が複数サービスへ影響する可能性があり、設定ミスが意図した分離を壊すこともある。価値は、共有依存が存在しないという主張ではなく、管理された分離と予測可能な接続にある。

Cloud Connectは、AWS、Microsoft Azure、Google Cloud、Oracleなどの商用クラウドへESnet経路を延長する。サイトは一般の公開インターネットルーティングではなく、専用のLayer 2またはLayer 3接続を通じてクラウドの接続点へ到達できる。経路制御を改善し、不安定なトランジットへの露出を減らせるが、クラウド側のセキュリティ、事業者障害、ID設計、データ転送料、リージョン可用性を解消するわけではない。

クラウドとの関係は、ESnetの役割の変化を示す。米国エネルギー省の科学は、研究所と連邦スーパーコンピューターの中だけに存在しない。研究者は商用オブジェクトストレージ、専門サービス、バーストコンピューティングを利用できる。ESnetは、クラウドを連邦ネットワークの一部だと誤認させず、専用回線だけでクラウドアカウントが安全になるとも主張せずに、こうした資源を接続しなければならない。

その他のサービスには、セカンダリDNS、ネットワーク時刻、Route Hijack監視、blackholingがある。光容量が正常でも、名前解決障害、時刻の誤り、route leak、DoS攻撃によって科学システムが使えなくなる可能性がある。

サービス全体は、複数のネットワーク層にまたがる運用上の取り決めである。物理接続が経路を作り、ルーティングが到達性を作る。プライベートサービスが論理境界を作り、クラウド接続が商用インフラへ延長する。セキュリティと補助サービスが既知の障害モードを減らす。利用者は両端で、正常に機能するエンドポイントとローカルネットワークを用意しなければならない。(ネットワークサービスメニュー)

OSCARSは容量を予約可能な資源にする

一般的なインターネットトラフィックは、パケット到着時に利用可能な容量を使う。このモデルは通常の通信には適しているが、科学転送の中には、予定され、非常に大きく、遅延による損失が大きいものがある。OSCARSは、認可された利用者やアプリケーションが、指定した期間のネットワーク資源を予約できるようにする。

予約には、エンドポイント、開始時刻、終了時刻、帯域、VLAN情報、経路除外、その他の制約を含められる。システムはトポロジーと既存の予約を調べ、条件を満たす経路を選び、必要な状態をネットワークへ設定し、予約終了後に削除する。限られた資源の二重割当を防ぎ、保守や障害によって利用可能なトポロジーが変化する状況も考慮しなければならない。

重要なのは運用上の変化である。回線の手動設定には複数の技術者による数日の調整が必要になる可能性があるが、プログラムによる予約は数分で作成でき、実験のワークフローへ組み込める。ネットワークは固定された背景設備ではなく、ストレージや計算資源と同様にソフトウェアが要求できる資源になる。

OSCARSはオープンソースの本番システムであり、ESnet外のネットワークやtestbedでも導入または評価されてきた。ただし、公開されている導入情報には歴史的な記述も含まれる。掲載されたすべての組織が現在も同一構成で運用しているとみなすべきではない。

予約はアプリケーションのスループットを保証しない。ネットワーク上の一定容量は確保できるが、ストレージの読み出しを速くし、キャンパスネットワークのパケット損失を修復し、OSを適切に調整することはできない。アプリケーションが予約速度の一部しか出せない場合、診断はエンドツーエンド経路へ戻らなければならない。

予約は資源配分上の問題も生む。優先度の高い実験は保証された容量から利益を得るが、未使用の予約が他の利用者の柔軟性を下げる可能性がある。誰がサービスを要求できるか、競合をどう解決するか、予約をpreemptできるかは、コードが自動化されていても施設ガバナンスの問題である。

OSCARSは、ESnetの応用ソフトウェアがインフラへ変わった明確な例である。人手の運用手順を反復可能なサービスへ変え、認可に関する人間の方針を維持しながら、科学アプリケーションがネットワーク要件を表現する手段を提供した。(OSCARS)

SENSEはネットワークとエンドシステムを共同調整する

予約済みのネットワーク経路は、分散ワークフローの一部しか解決しない。ストレージ、転送サービス、計算資源にも、可用性、容量、ポリシーがある。SENSE、すなわちSoftware-defined network for End-to-end Networked Science at the Exascaleは、単一ネットワークドメインを超えてオーケストレーションを広げようとしている。

SENSEは、ネットワークとエンドシステムを発見可能な資源として表現する。科学アプリケーションは、特定の速度で施設間のデータセットを移動するといった目標を記述できる。SENSEは参加ドメインから資源モデルを集め、資源を交渉し、ネットワークと転送サービスを設定し、テレメトリーを監視し、ワークフロー終了後に資源を解放する。

これは一つの回線を設定するより難しい。参加機関は独自の権限とデータモデルを維持する。あるドメインは帯域を公開し、別のドメインはストレージエンドポイントや転送サービスを公開する。ポリシー、認証情報、保守時間も異なる。SENSEは、一つの中央コントローラーが全システムを命令できると想定せずに調整しなければならない。

2024年のLarge Hadron Collider Data Challengeでは、SENSE対応ワークフローがCaltechとUniversity of California, San Diegoの間で330 Gbpsを維持した。特定の実運用ワークフローで、大規模なアプリケーション主導型オーケストレーションが機能した証拠である。ただし、全ESnetサイトで利用できる本番サービスを意味しない。2024年の報告でも、SENSEは研究段階とされていた。

OSCARSとSENSEの違いは、自動化の単位が変化していることを示す。OSCARSは既知のサービスドメイン内でネットワーク資源を予約する。SENSEは、異なる組織が所有するシステムを含む完全な経路を交渉しようとする。前者は本番運用の境界が明確で、後者は科学的価値が大きい代わりに、ガバナンスと統合のリスクが高い。

運用者にとっての実務的な問題は、障害の責任である。アプリケーションが目標を宣言し、ワークフローの性能が不足した場合、原因は資源モデル、ネットワーク、ストレージ、認証情報、アプリケーション、ドメイン間のタイミングにある可能性がある。オーケストレーションは、交渉された状態のどの部分が意図から外れたかを各運営者へ示せる証拠を提供する必要がある。

SENSEは、アプリケーションが回線ではなく成果を要求するインフラを目指している。成熟度は、最高転送速度だけでなく、複数ドメインでの反復可能な本番利用、明確なサポート責任、部分障害からの回復能力によって評価すべきである。(SENSE; 2024年応用研究)

EJFATは科学イベントを遠隔計算へ直接送る

従来の科学データ移動は、ファイルを基準とすることが多い。実験がデータを生成し、ローカルシステムがファイルへ書き込み、ストレージへ保存し、その後に別の施設へ転送して解析する。運用方法として確立している一方、結果が得られるまで時間がかかり、収集ピークに対応するローカルストレージと計算資源が必要になる。

EJFAT、すなわちESnet–Jefferson Lab FPGA Accelerated Transportは、異なる経路を提供する。UDPでカプセル化されたイベントデータを装置から利用可能なCompute Workerへリアルタイムに配信し、遠隔スーパーコンピューティング施設も利用できる。FPGAベースのプログラマブルSmartNICがイベントIDを読み、同じイベントに属するすべての断片を一つのWorkerへ送る。計算ノードの空き状況に応じて、制御システムが配信先を変更する。

イベント単位のグループ化が重要である。一般的なロードバランサーはパケットを複数サーバーへ分配できるが、科学処理では一つの検出イベントに属する全断片を同じWorkerへ届ける必要がある。EJFATは、高速な転送処理と計算Workerのスケジューリングを分離し、それぞれを独立して拡張できるようにする。

2024年4月の実証では、VirginiaのJefferson LabからCaliforniaのPerlmutterスーパーコンピューターへ100 Gbpsでデータをストリーミングし、中間ディスクを使わずにリアルタイム処理した。ESnetによれば、その後の試験では複数施設の計算資源と約2万コアを利用した。特定の実証結果であり、すべての科学装置が同じ構成で導入できることを保証しない。

Facility for Rare Isotope Beamsの事例は、より最近の運用例である。ESnetは2026年7月、研究者がEJFATを通じて約5～6 Gbpsで生データを遠隔スーパーコンピューターへ送ったと報告した。15時間で生成された615 GBのデータは、Perlmutterの8ノード上でMachine Learning推論を用い、20分で処理された。ネットワーク速度は100Gの実証より低いが、科学上の価値は、実際のワークフロー中に結果を早く得られたことにある。

リアルタイムストリーミングは施設の経済性も変える。検出器は、すべてのピークへ備えたローカル計算資源を構築する代わりに、共有スーパーコンピューティングを利用できる。研究者は、貴重なビーム時間が残っている間に結果を確認できる。一方で、ネットワーク障害、計算割当の問題、イベント配信の誤りが、後日のファイル転送ではなく実験中の処理へ直接影響する。

EJFATは高度なプロトタイプまたは形成中のプラットフォームであり、広く提供される標準サービスではない。本番導入には、装置統合、セキュリティ、FPGAの確保、運用責任、スケジューリング契約、UDPパケット損失時の明確な挙動が必要である。その意義は、広域ネットワークが収集後の転送手段ではなく、データ取得ループの一部になり得ることを示した点にある。(EJFAT; FRIB事例)

High-Touch、perfSONAR、iperf3が経路を観測可能にする

高容量ネットワークは、集約利用率のグラフでは見えない形で失敗することがある。短いmicroburstがキューをあふれさせ、パケットが順序を入れ替え、損失が一方向または一部トラフィックだけへ現れ、試験の間に経路が変化することがある。セキュリティ上重要なフローも、統計的サンプリングの中へ埋もれる可能性がある。

High-Touchはプログラマブルなハードウェアとソフトウェアを使い、従来のサンプリング型記録より詳細なパケットとフローのテレメトリーを集める。2024年には、Large Hadron Colliderのスループット、Rubin Observatory経路でのパケット並べ替え、セキュリティ事案の調査に使われた。目的は、集約トラフィックでは見えない挙動を特定できる診断精度である。

より詳細な証拠にはコストがある。パケットとフローの詳細は、保存容量、処理能力、アクセス制御、慎重な解釈を必要とする。通信するエンドポイント、共同研究の構造、科学活動の時刻を明らかにする可能性もある。運用可視性のためのシステムは、同時に機密性の高いデータ資産になる。

perfSONARは別の層を扱う。複数組織の協力で支えられる分散計測システムであり、ESnetは創設時からの主要参加者である。2024年には世界で2,000拠点超が報告され、ESnetは30超のサイトを運用していた。制御された試験によって、参加ノード間のスループット、遅延、損失、経路変化を測定する。

分散構成が重要である。研究者が転送の遅さを報告した場合、適切に設計されたperfSONARノード間の試験は、基礎経路が期待速度を出せるかを示せる。方向別の試験で非対称性を調べ、繰り返し計測で劣化の開始時期を把握できる。Tracerouteは経路変化を示せるが、観測経路がアプリケーションの実際の転送経路と完全に一致するとは限らない。

iperf3は、TCP、UDP、SCTPを使った能動的なスループット試験を提供し、IPv4とIPv6をサポートする。ESnetはこのオープンソースツールを保守し、特定条件下で200G経路上の150 Gbps超の試験を報告している。合成試験はアプリケーションのベンチマークではないが、ホストとネットワークが制御された条件でトラフィックを運べるかを確認できる。

High-Touch、perfSONAR、iperf3は異なる現実を観測する。High-Touchは本番フローを詳細に捉え、perfSONARは複数ドメインにわたる経路を定期またはオンデマンドで測り、iperf3はエンドポイントとネットワークのスループットを直接試験する。一つの視点で完全な診断はできないが、組み合わせれば、一つの運営者のローカルダッシュボードだけで分散障害を判断する危険を減らせる。(性能ツール; 2024年運用イノベーション)

最良の容量増強は、データを運ばないことかもしれない

容量を追加することだけが、科学ネットワークを改善する方法ではない。特定のデータセットが同じ地域の研究者から繰り返し要求される場合、すべてのコピーを広域ネットワークで移動することは、バックボーンに余裕があっても容量を消費し、遅延を増やす。

ESnetの2024年応用研究報告は、科学データ共同体が利用する五つの地域キャッシュノードを取り上げた。調査全体で、キャッシュは広域トラフィックを平均1日33テラバイト削減した。要求の3分の2がローカルで処理され、平均cache hit rateは94％だった。効果は地域によって大きく異なり、南Californiaで69.3％、Chicagoで48.4％、Bostonで6.6％の広域トラフィック削減が報告された。

差は、キャッシュの価値がデータセットの人気、地域利用者、ストレージ容量、eviction policy、サービス設定に依存することを示す。同じデータを繰り返し解析する共同体の近くでは大規模転送を削減できる。異なるデータを低頻度で使う環境では、同じ効果を得られずにストレージを消費する可能性がある。

キャッシュは統制の範囲も変える。ネットワーク運営者がデータ配置へ関与し、科学共同体はどのデータを複製できるか、鮮度をどう維持するか、誰がアクセスできるかを決める必要がある。ストレージ障害や古いコピーは、ネットワークに隣接する運用問題になる。

最も効率的なビットは、バックボーンへ入らないビットかもしれない。光更新は供給を増やすが、キャッシュは需要を変える。ワークフローのスケジューリングは混雑時間を避け、圧縮やローカルフィルタリングは転送前にデータを減らせる。成熟したインフラ計画は、設置済みテラビットだけで進歩を測らず、これらの手段を併せて評価する。

調査結果は対象環境に限定して理解すべきである。すべての科学データが94％のhit rateを得られるわけではなく、固有のライブストリームに必要な新容量をキャッシュが置き換えるわけでもない。重要なのは、データアーキテクチャとネットワークアーキテクチャを一体として設計できると示したことである。(2024年応用研究)

大西洋横断科学には、容量だけでなく物理的多様性が必要である

ESnetの米国内インフラは、国際的な役割から切り離せない。高エネルギー物理は大西洋両岸の施設と計算センターで構成され、2024年年次報告はLarge Hadron Collider関連がESnetトラフィックのおよそ半分を占めたとした。米国内の全ルーターが正常でも、欧米間の海底ケーブル障害が主要な科学ワークロードを止める可能性がある。

2024年から2025年初頭にかけて、ESnetが公表した大西洋横断容量は約700 Gbpsから2.7 Tbpsへ増えた。計画の重要な部分は、Aqua Commsとの15年契約であり、New York、Dublin、Londonを結ぶ経路のファイバーペアの4分の1を確保した。ESnetは複数の海底ケーブルでGÉANTと容量と費用を共有する。工学上の目標は、物理的に多様な四つの経路で最低3.2 Tbpsを提供し、10 Tbps超まで拡張できる設計を持つことである。

容量と多様性は別の問題である。論理的に異なる二つのサービスも、同じ海底ケーブル、Landing Station、陸上ダクトを共有し、同時に停止する可能性がある。海底ケーブルの修理には、障害位置の特定、許可、ケーブル船、適切な天候、損傷したファイバーの回収と試験が必要で、数週間から数か月かかる場合がある。ESnetは三本の同時障害も想定しており、一つのバックアップ経路だけでは不十分と考えている。

長期スペクトラム権は、完成回線を繰り返し購入するより更新を制御しやすい。一方で、特定のケーブルシステム、Landing Station、運用パートナーへの長期的な拘束を生む。スペクトラム契約は海洋リスクを消さない。複数システムへ容量とレジリエンスを配分できるようにする一方、ESnetはケーブル所有者、修理プロセス、パートナーネットワークへ依存し続ける。

「専用」という言葉にも注意が必要である。ESnetは重要経路で専用権利と専用インフラを管理するが、物理資産の形は一様ではない。国内外の経路にはDark Fiber、スペクトラム、Lit Service、コロケーション、パートナー容量が含まれる。地図上の一本の線だけでは、各区間の所有権や修理権限は分からない。

GÉANTとの関係は、研究ネットワークが中央集権的でなくても協力できることを示す。両組織は費用を共有し、科学トラフィックを調整できるが、それぞれ自らの機関と参加者に責任を負う。エンドツーエンド性能は、両バックボーンの外にある各国の研究ネットワーク、キャンパスシステム、実験施設にも依存する。(大西洋横断マイルストーン; 2024年年次報告)

科学需要は持続的大容量、稀なバースト、厳しい期限を併せ持つ

Large Hadron Colliderは持続的大容量を生む。分散計算モデルは、CERN、Fermilab、Brookhaven、大学、その他の計算センター間で実験データを移動し、継続的な国際トラフィックを作る。計画中のHigh-Luminosity運用は、検出器データ、シミュレーション、複製を増やすと予想される。ネットワークには、日常的な巨大フローを運びながら、海底ケーブルや施設障害を迂回できる経路多様性が必要になる。

Vera C. Rubin Observatoryは時間制約を示す。Chileの望遠鏡は、約13 GBの画像を30秒ごとに生成するよう設計されている。データはSLACで迅速に処理され、一過性天体について他の観測所へ警報を出す。ESnetは、各画像を約1万2,000マイルにわたって7秒未満で運ぶ目標を示している。経路には南米と国際研究ネットワークが含まれ、結果はESnet単独ではなく複数組織の工学に依存する。

DUNEは極端なバーストを想定する。超新星発生時には、100秒で最大600 TBを移動する必要があると見込まれ、20年間のプログラム全体では約900 PBを生成すると予測される。これは将来の設計要件であり、現在の日常トラフィックではない。しかし、天体現象は容量が利用可能になるまで延期できない。平均利用率だけで設計されたネットワークは、最も科学的価値の高い瞬間に不足する可能性がある。

核融合研究は、国際距離と長期開発を組み合わせる。2026年5月には、ITERのデータ176 TBをMarseilleからSan DiegoにあるGeneral AtomicsのDIII-D施設へ、約80 Gbpsで転送した。ITERはまだ建設中であり、これは通常の全面運用ではなく準備試験だった。要件資料は、将来の一部ワークフローについて1日約2 PB、最低200 Gbpsを想定している。

FRIBとJefferson Labは別のパターンを示す。実験は、データが到着している間に遠隔解析を必要とする場合がある。EJFATは、ファイルの完成とコピーを待たずに、イベントストリームをNERSCやOak Ridgeの計算資源へ送れる。光源、電子顕微鏡、その他の装置も、ローカルフィルタリング、遠隔AI推論、結果を装置運営者へ返す速度について同様の判断を迫られる。

気候科学と地球科学は、さらに異なる需要を加える。大規模シミュレーションと観測データは計算施設とストレージ間を移動し、野外センサーは通常のファイバーが届かない場所に置かれることがある。一つの見出し速度で、持続的大容量、稀なバースト、低遅延フィードバック、国際共同研究、遠隔データ取得をすべて表すことはできない。(Rubin Observatory事例; DUNE事例; 要件レビュー)

要件レビューが科学計画をネットワーク設計へ変換する

ESnetは、実験が最初のデータを生成してからファイバー、ルーター、大西洋横断容量を調達することはできない。長距離契約、装置購入、サイト建設、ソフトウェア開発には数年を要する。そこでESnetは、米国エネルギー省の科学プログラムと5年から10年先を対象に要件レビューを行う。

研究者と施設チームは、装置、予測データ量、保存場所、計算先、時間制約、国際共同研究先、クラウド利用、レジリエンス要件を説明する。ネットワークと計算の専門家は、完全なワークフローを検討する。より大きなリンクへの要求が、実際にはローカルストレージ、経路多様性、セキュリティ設計、転送ソフトウェアの問題を示すこともある。

要件レビューは共同設計である。科学プログラムが達成しようとしている成果を説明し、ESnetがそれをインフラ依存へ翻訳し、想定経路が機能するか検証する。その結果は、サイト接続容量、新経路、海底容量の調達、Science DMZの導入、オーケストレーション研究、人員配置、次世代ネットワークの時期へ影響する。

2025年に完了し、2026年1月に公開されたHigh Energy Physicsの大規模レビューには、127人が参加し、14のケーススタディが約400ページへまとめられた。重要なのは、すべての予測が正しいことではない。装置のスケジュールは遅れ、ソフトウェアは効率化し、新しいワークロードが現れる。価値は、研究者、ネットワーク技術者、計算センター、資金提供者が同じ前提を確認し、意図的に更新できる記録を持つことにある。

科学需要は連続的に増えるとは限らない。超新星は実験期間中に発生しない可能性がある一方、AIワークフローは正式なレビュー周期より速く拡大する可能性がある。平均トラフィック成長は予算計画に有用だが、ケース別計画の代わりにはならない。2024年の4％という低い成長率だけで、数十年規模のインフラ計画を決めるべきではない。

要件レビューは責任も分配する。研究所は、全国バックボーンが不十分なキャンパス経路を自動的に修復すると考えるべきではない。ESnetも、容量を構築した後に科学プログラムが必ず適応すると考えるべきではない。依存関係を共有計画へ書き込むことで、後の対立を具体的にできる。(要件レビュー報告)

Wireless EdgeとQUANT-NETが施設の境界を試す

全国ファイバーネットワークは固定施設への接続に適しているが、科学装置は常にそのような場所にあるとは限らない。地熱フィールド、環境観測所、期間限定の調査地点には、通信事業者の接続、安定電源、経済的なファイバー経路がない場合がある。ESnetのWireless Edgeは、プライベートセルラー、Wi-Fi、指向性無線、衛星システムを組み合わせ、科学ワークフローをこうした場所へ延長する方法を調べている。

2026年6月に公表されたNevadaの地熱観測では、Citizens Broadband Radio Serviceスペクトラムを使うプライベート4G、長距離Wi-Fi HaLow、通常のWi-Fi、Starlinkバックホール、指向性無線、自給電力を持つ可搬塔を組み合わせた。これは一つの現場条件へ対応した設計であり、ESnetの全国無線サービスでも、長距離ファイバーの代替でもない。地形、天候、スペクトラム、電力、衛星事業者がサービス経路の一部になる。

重要な組織上の点は、ESnetが最寄りのファイバー拠点で責任を終わらせなかったことである。科学連携機能は、データ取得、バックホール、広域転送を一つのワークフローとして扱った。遠隔研究地点は物理的条件が異なるため、均一な製品より、現場ごとに調整する手法の方が価値を持つ場合がある。

QUANT-NETは別の境界を調べる。ASCRの資金を受けたプロジェクトは、Berkeley LabとUniversity of California, Berkeleyの二拠点を約5 kmで結ぶ、三ノードの量子ネットワークtestbedを構築している。研究対象にはイオントラップ、光子結合、entanglement swapping、Bell-state measurement、時間制約の厳しい制御、モジュール型ソフトウェアが含まれる。

ESnetとの関係は主として制御とオーケストレーションにある。量子実験には古典通信、正確なタイミング、操作が難しい装置間の調整が必要である。オープンソースの制御ソフトウェアは、実験の再現性を高め、手動調整を減らせる。testbedは本番量子インターネットではなく、通常の大規模科学データを量子もつれで運ぶものでもない。

Wireless EdgeとQUANT-NETは、何を教え、何を再利用できるかで評価すべきである。すべてのESnet利用者が無線アクセスサービスや量子リンクを受けることを示すものではない。将来の科学ネットワークが新しい物理媒体や制御方式を必要とする可能性に備え、ESnetの研究機能を広げている。(Wireless Edge; 量子ネットワーク研究)

American Science CloudとESnet7は計画単位をサイトからワークフローへ移す

Integrated Research InfrastructureとAmerican Science Cloudは、米国エネルギー省が施設を捉える単位の変化を示す。科学装置、ネットワーク、データストア、スーパーコンピューターを独立したサービスとして扱うのではなく、科学データ、AI、高性能計算を支える連邦型環境として動かそうとしている。

ESnetは接続とオーケストレーションの層を担う。データは装置からストレージとアクセラレーターへ移動し、利用者とサービスは管理されたアクセスを必要とする。ワークフローは利用可能な資源を発見し、テレメトリーは科学目的が達成されているか示さなければならない。EJFAT、SENSE、OSCARS、Cloud Connect、High-Touchはこの問題の一部を扱うが、どれも単独でAmerican Science Cloud全体を構成するものではない。

Confab26では、Inder MongaがAmerican Science CloudのProject Deputyとして紹介され、プログラムには実証と次世代ネットワーク計画が含まれた。これは制度的な作業が進んでいる証拠であり、2026年8月時点で全国的な科学クラウドが完成していたことを示さない。アクセス方針、接続資源の一覧、本番サポート、ガバナンスは引き続き整備中だった。

ESnet7も同じ計画環境に現れる。名称は実在し、テレメトリー、パケット検査、データ移動、AI、量子ネットワークに関するセッションが行われている。しかし、現在の本番世代はESnet6である。提供された資料には、最終アーキテクチャ、プロジェクトベースライン、ベンダー選定、完全な予算、開始日がない。

この区別は重要である。ネットワーク世代の名称は、機器が導入される前から研究優先順位、ベンダーとの関係、資本要求へ影響する。計画プログラムを完成済みのバックボーンとして報じるべきではない。最も妥当な理解は、ESnetがESnet6の運用経験と現在のワークフロー研究を使い、第7世代に必要な機能を決めようとしているというものである。

速度は引き続き重要だが、プログラム可能性とインテリジェンスも同じ程度に重要になる可能性がある。より速い回線は、利用可能な計算資源の場所をアプリケーションへ伝えず、microburstを特定せず、検出器ストリームをスケジュールせず、複数ドメインのサービスが正しく解放されたことを証明しない。ESnet7の戦略的な問いは、管理不能な中央コントローラーにならずに、ネットワークが科学ワークフローをどこまで理解し、調整すべきかである。(Confab26; 2024年応用研究)

連邦予算は施設を支えるが、企業売上ではない

ESnetは、一般利用者へ帯域を販売してバックボーンを運営しているわけではない。主な資金は、ASCRのHigh Performance Network Facilities and Testbedsという予算項目から提供される。FY2027要求は1億300万ドルで、前年度の成立額として示された9,726.1万ドルを上回った。

この数字は公開情報として最も有用なプログラム規模の指標だが、ESnetの損益計算書ではない。予算項目には、ネットワーク関連のtestbed、ソフトウェア保守、更新、研究活動も含まれる。本番バックボーン単独の年間運用費、ネットワーク世代ごとの設備投資、各サイト接続に対応する収入は示されていない。

公共資金は、商業需要が現れる前の投資を可能にする。長期スペクトラム権を取得し、オープンソースツールを保守し、トラフィック量は小さくても科学的価値の高い実験を支援し、現在の利用率以上の経路多様性を構築できる。一方で、このモデルは議会予算、米国エネルギー省の優先順位、Berkeley Labの運営契約に依存する。

サイト接続が常に無料というわけでもない。ESnetのSite User Cost Policyは、スポンサーシップ、利用資格、追加要件に応じて、接続関連費用を機関利用者へ負担させる場合がある。関係の単位はサイトであり、研究者個人ではない。個々のエンドユーザーはESnetから別途請求または登録されない。

独立した財務諸表がないため、完全な財務分析には限界がある。公開情報は、すべての主要供給者への依存、給与費、減価償却、経路別資産台帳、年間設備投資額を示さない。1億300万ドルを「ESnetの売上」と呼ぶのは誤りである。より正確には、連邦プログラムが、本番施設、更新、ソフトウェア保守、testbedを含む広い活動項目を通じて資金提供している。

資金構造は戦略判断にも影響する。商用ネットワークは費用を回収できない経路から撤退できるが、公共科学施設は国家ミッション、科学機会、長期容量、予算制約を併せて判断する。即時の財務収益がなくても投資を正当化できる一方、透明な優先順位付けと要件レビューによる証拠が必要になる。(ASCR FY2027予算要求; ESCC)

可用性、ルーティングセキュリティ、テレメトリーは独自の責任を生む

ESnetの2024年報告は、重要な可用性結果を示した。対象指標に含まれる米国エネルギー省科学局の10サイトすべてが、計画保守を除いて100％のサービス可用性を達成した。全サイトが同時に99.9％要件を超えた初めての年だった。年次報告は、より広い範囲について99.99％という数字も示した。どちらも有用だが対象範囲が異なり、すべてのサービス、機関、国際経路が一度も停止しなかったことを意味しない。

Site Resilience Programは、接続施設の物理入口、ルーター、電力、failure domainを調べる。全国バックボーンが冗長でも、一つの研究所が一つのローカルダクトまたは装置に依存していれば脆弱である。レジリエンスはバックボーンの地図で終わらず、建物とデータ転送システムまで到達しなければならない。

ルーティングポリシーは別の制御層を提供する。ESnetはピアリングでRPKI-invalidの経路を拒否し、最新のルーティング記録を求め、Route Hijack監視とblackholingを提供する。これらは既知のリスクを減らすが、ドメイン間ルーティングを完全に安全にはしない。正しいオリジンを持つ経路でもroute leakやポリシー誤りが起こり得る。Blackholingは他のシステムを守る代わりに、対象宛先を到達不能にする。

自動化も同様のトレードオフを持つ。標準化された設定、インベントリー、オーケストレーションは手作業の誤りを減らし、復旧を速める。一方、誤ったテンプレート、ポリシー、データ記録が複数装置へ急速に伝播する可能性がある。段階的な導入、独立した検証、明確なrollbackまたはforward recovery、単一の自動化アカウントへ与える権限の制限が必要である。

運用データも同じ慎重さを必要とする。ESnetの施設データ方針は、ルーター利用情報とNetFlowを無期限に保存し、米国東海岸と西海岸のストレージへ複製できるとしている。能動的なperfSONAR測定は、バックアップのない単一ディスクに6か月保存される。ルーター利用率とtracerouteは公開され、フローとセキュリティ記録へのアクセスは制限される。

これは、ESnetが個々のエンドユーザーを加入者として追跡しないという説明と矛盾しない。加入・請求システムとネットワークメタデータは別のものである。個人契約を持たなくても、メタデータはエンドポイント、通信機関、時刻、トラフィックのパターンを示す。高精度テレメトリーは診断とセキュリティを改善する一方、データ最小化、アクセス制御、保存期間の見直し、責任ある利用をより重要にする。

最も強いレジリエンスモデルは、完全な無停止を主張することではない。物理的多様性、サイト工学、ルーティングセキュリティ、計測、インシデント対応、データガバナンス、各指標の対象範囲を明確にする姿勢を組み合わせることである。(可用性マイルストーン; 施設データポリシー; ピアリングポリシー)

ESnetが示すもの

ESnetの歴史は、より速いネットワークの連続として読むことができる。専門的な前身ネットワーク、ESnet4、全米100GのESnet5、マルチテラビット規模のESnet6へ進んだ。しかし、この速度の年表だけでは最も重要な連続性を捉えられない。ESnetは、帯域だけでは科学上の問題を解決できなくなるたびに、周辺のアーキテクチャを変えてきた。

Science Data Networkは巨大フローを一般通信から分け、OSCARSは容量を予約可能にした。Science DMZは組織境界を再設計し、perfSONARとiperf3は性能問題を測定可能にした。SENSEはアプリケーションの意図を複数の管理ドメインへ結び付け、EJFATは広域経路を検出器の処理ループへ組み込んだ。キャッシュは需要を変え、大西洋横断スペクトラムは国際容量への制御を強めた。

組織の権限は依然として限定され、分散している。DOEとASCRが使命と資金を定め、Berkeley Labが施設を運用し、University of Californiaが研究所を契約上管理する。サイトコーディネーターは自機関へ影響する変更を承認し、国際パートナーは自らのネットワークを管理する。クラウド事業者、通信事業者、海底ケーブル所有者、装置ベンダーは、ESnetが依存する別の構成要素を支配する。

この分散は、ソフトウェアで消せる不便ではない。科学ネットワークが運用される条件そのものである。ESnetの実務的な成果は、一つの機関が全経路を所有していると装うことなく、ワークフローを実現できるだけの調整を作ったことにある。

将来についても、成熟度を正確に区別する必要がある。ESnet7は計画段階であり、SENSEは最新の完全報告で研究段階とされ、EJFATは高度なプロトタイプまたは形成中のプラットフォーム、QUANT-NETは実験、American Science Cloudは構築途上だった。成熟度を限定して説明することは、技術的価値を弱めることではない。

ESnetの長期的な意義は、科学ユーザー施設というモデルにある。ネットワークを、要件、運用、ソフトウェア、計測、研究、公共資金を持つ科学装置として扱う。数千キロ離れた検出器とスーパーコンピューターも、その間のシステムが一つの経路として設計されなければ、十分な共同価値を生まない。

したがって、重要なのはESnetが普遍的なランキングで最速かどうかではない。提供された資料には、現在のすべての指標を比較した中立的なランキングはない。より強く、実務的な結論は、ESnetが公開情報で確認できる世界有数の科学ネットワークであり、その最大の貢献は分散科学をエンドツーエンドで運用可能にしたことだというものである。(ESnetの歴史; ESnet6開始; 2024年年次報告)