摘要
- 能源科学网络(Energy Sciences Network,通常简称为 ESnet)是美国能源部(Department of Energy)科学办公室(Office of Science)下属的一项科学网络基础设施,由劳伦斯伯克利国家实验室(Lawrence Berkeley National Laboratory)运营。它既不是商业运营商,也不是独立公司,而是为科学研究而建设的联邦基础设施。
- ESnet6 汇集了约 1.5 万英里专用光纤基础设施、光传输系统、数据包路由、专用网络、与云和科研网络的互联、测量工具以及可编程服务。2024 年年度报告显示,其总容量达 57 Tbps,年流量为 1.77 EB,但这些数字衡量的是系统的不同方面,并不意味着每个用户都拥有一条 57 Tbps 的路径。
- ESnet 最持久的贡献之一可能是其端到端工程模型。Science DMZ、perfSONAR、iperf3、OSCARS、SENSE、High-Touch 和 EJFAT 解决的是本地系统、网络预留、遥测和实时数据移动问题,这些决定了主干容量能否转化为有效的科学产出。
- 下一步战略举措不仅仅是提升主干网速度。美国科学云(American Science Cloud)、综合科研基础设施、ESnet7 规划、实时仪器数据流、现场无线网络以及量子网络控制,都指向一个能直接参与科研工作流的网络。各项技术的成熟度不一,规划或演示不应被表述为已全面投入生产服务的通用服务。
科学网络,而非零售互联网服务提供商
理解 ESnet 最简单的方式是追踪一份科学数据。探测器、望远镜、显微镜或模拟在实验室或研究设施中产生信息。本地采集系统收集数据,存储与传输服务器将其准备好以便传送,实验室网络则将其传送到受控边界。从那里,ESnet 连接可以将数据跨美国传输、穿越大西洋、抵达能源部的超级计算机、经由科研与教育网络或进入商业云。结果以分析数据集、警报、模型或关于下一步实验决策的形式返回。
没有任何单一组织能控制整条路径。仪器团队、实验室网络、区域科研网络、云提供商、国际合作伙伴以及超级计算设施可能分属不同的运营者。ESnet 提供任务导向的远程层,并与其他运营者合作,使整条路径像一个系统那样运行。缓慢的存储服务器、拥挤的校园链路或不合适的防火墙,会浪费快速国家主干网的容量,而 ESnet 的故障也可能打断设计良好的本地设施。
其机构地位也很特殊。ESnet 是能源部科学办公室的一个网络设施,主要经由高级科学计算研究(Advanced Scientific Computing Research)提供资金和监督,并由劳伦斯伯克利国家实验室下属的科学网络部门(Scientific Networking Division)运营。伯克利实验室本身由加州大学根据实验室运营合同为能源部管理。ESnet 没有可识别的股东、股票、企业估值或独立的商业资产负债表。应将其描述为联邦科学基础设施,而非销售网络服务的公司。
研究人员通常间接接触 ESnet。他们使用其流量穿越 ESnet 的仪器、超级计算机、实验室服务、大学连接或协作网络。该设施区分机构站点用户和最终用户,并声称没有正式登记或跟踪每个个体最终用户。2024 年年度报告中提到的“超过 3 万组织用户”因此是一个过时的机构度量,而非精确的订阅者计数。
这种运营模式解释了为什么与常规运营商的比较不够全面。ESnet 运行路由、光传输和互联,但也进行需求评审、开发开源工具、构建实验服务并帮助站点修复端到端性能问题。它的产品不是零售连接,而是使地理上分散的科学设施就像一台共享机器的组件那样协同工作的能力。(ESnet 治理;网络服务)
历史始于稀缺的计算机和声学调制解调器
ESnet 的正式历史可追溯到 20 世纪 70 年代中期,当时计算和远程通信都十分稀缺。在劳伦斯利弗莫尔国家实验室(Lawrence Livermore National Laboratory)的受控热核研究计算机中心,工作人员通过四个声学调制解调器连接了一台借来的 CDC 6600。这些设备和速率属于另一个时代,但操作问题仍然可察:一个专门的科学界需要远程访问过于昂贵而无法在每个参与机构复制的计算能力。
能源部不同的研究共同体在 20 世纪 70 年代末和 80 年代初发展了自己的网络。高能物理和磁约束聚变研究拥有不同的设施、合作群体和数据流,HEPnet 和 MFEnet 等前身网络反映了这些边界。当商业服务不能提供足够的覆盖、性能或操作关注时,为特定目的构建网络是合理的。但同时,它们也造成了重复建设:每个项目都可能独立谈判电路、维护技术和培养能力,使合作和长期升级变得支离破碎。
ESnet 于 1986 年正式成立,将这些功能整合到一个更广泛的科学网络中。这一变化既是组织上的,也是技术上的。一个共享设施能够预测多个项目的需求,运营全国性链路,协调国际连接,并留住专业人才。它还能将能力从单个项目孤立的关切,转变为整个部门的长期基础设施计划。
早期模式确立了若干至今仍可见的特征。用户由科学使命定义,而非零售市场。大型主机和仪器证明了共享公共投资的合理性。网络设计跟随具有长期视野的研究项目。运营需要能够理解通信系统和故障科学后果的专业人员。需求是不均衡的,因为单个实验产生的流量可能远高于常规基线。
伯克利实验室自身也有网络历史。1974 年,它将一台 CDC 6600 连接到 ARPANET,实验室研究人员后来为 TCP 拥塞控制的基础性工作做出了贡献。Van Jacobson 和 Mike Karels 的工作属于更广泛的伯克利实验室环境,不应仅归于 ESnet。然而,机构重合很重要:它使一个生产科学网络靠近一群将协议行为、测量和性能视为可研究的工程问题而不是固定条件的研究人员。
运营于 1996 年转至伯克利实验室。这一举措将当前总部设在了国家能源研究科学计算中心(NERSC)、网络研究人员、软件工程师和其他能源部项目旁边。它还强化了一种文化,即生产设施和应用研究组织共享专业人员、实验室和技术问题。(ESnet 历史)
网络为何成为共享科学设施
共享科学设施之所以存在,是因为某些能力过于昂贵、专业或相互依赖,无法让每个研究团队独立构建。粒子加速器、光源或领导级超级计算机遵循这一逻辑。ESnet 将同一原则应用于通信。长距离光纤使用权、光设备、路由器、国际容量、全天候运营、网络安全、性能测量和工程支持被汇集在一个服务多个项目的设施中。
公共资金的合理性符合科学需求的特点。一家商业运营商可能出售高容量电路,但通常不会围绕一台计划在多年后开始运行的探测器、一次在其合同期内也许永远不会发生的超新星相关数据流、或一个零售规模小但公共价值高的工作流来定义其国家架构。ESnet 可以在利用率被测量之前就进行建设,因为它的使命是创造科学能力,而不是在短期内产生网络收入。
设施模式也改变了识别需求的方式。ESnet 与能源部科学项目进行正式的需求评审。研究人员和设施人员描述仪器、数据量、存储位置、计算目的地、时间要求、合作模式以及本地瓶颈,时间跨度为 5 到 10 年。这些结果指导站点连接容量、路由多样性、跨大西洋合同、编排研究和服务设计。
这个过程虽然不如一条新的相干光连接那么引人注目,但可能更为重要。一条海底频谱协议、一台路由器的采购或一个站点的第二个物理入口,可能需要数年才能获得资金并完成部署。等到实验开始产生数据时,会将可预见的基础设施需求变成紧急情况。需求评审将科学计划转换为工程准备时间。
评审还使不确定性显性化。预测可能改变,仪器时间表可能延迟,数据缩减软件可能改进,云的使用可能增长,设施可能重新设计其工作流。ESnet 不把某个案例研究视为有保证的流量订单。它使用证据来构建需求范围,并决定在哪里采用灵活性、保留容量或分阶段部署是合理的。
该模式避免向每位科学家按 GB 收费。核心运营获得联邦资金,而部分站点连接成本可根据项目赞助和“站点用户成本政策”(Site User Cost Policy)分摊。这并未消除激励差异。一个赞助项目可能偏好更便宜的连接;ESnet 可能偏好有利于多个项目的容量和弹性;一个站点可能推迟进行必要的本地升级以利用国家网络。治理的任务是使这些决策与科学成果对齐,而不是让每个机构仅将成本转移到另一个预算项目。(ESnet 站点协调委员会与成本政策;需求评审报告)
伯克利实验室运营系统,能源部定义使命
ESnet 没有运营商的法人层级。其权威分散在联邦项目链条中。能源部科学办公室定义使命。高级科学计算研究(ASCR)提供主要的项目和预算监督。伯克利实验室容纳科学网络部门,负责设施的设计、运营和开发。加州大学根据合同为能源部管理伯克利实验室。连接机构通过站点协调员和 ESnet 站点协调委员会参与。
Inder Monga 担任 ESnet 执行董事,并领导伯克利实验室的科学网络部门。公开领导层还显示 Chin Guok 为首席技术官,负责规划与创新;Adam Slagell 为首席安全官;Jon-Paul Herron 为网络工程总监;Susan Lucas 为业务运营副总监。这些职位之下是光学工程、路由、站点工程、网络运营、软件、测量、编排、安全、项目管理和科学社区联络等职能。
这一结构的广度修正了将国家网络简单化为一捆光纤和路由器的形象。ESnet 需要能够采购频谱、运行 BGP、构建遥测系统、维护开源软件、调查数据包行为、规划设施、管理安全证据并将科学需求转化为网络设计的专业人员。该组织既是运营性的,也是开发性的。
公开记录呈现了一个未解决的项目管理问题。ESnet 当前的治理页面指明 Benjamin Brown 是其 ASCR 项目管理员,而近期的需求评审材料指出 Carol Hawk 是 ESnet 项目管理员。公开资料可能未协同更新,或职责可能已变更或被分割。现有数据不支持在没有进一步确认的情况下选定一个单一现行架构。
ESnet 站点协调委员会为连接机构提供了一个正式运营渠道。每个站点指定一名协调员,能批准影响机构连接的请求、传达需求并参与政策或规划讨论。这是机构用户治理,而不是每位数据流经网络的科学家直接投票。
这种结构产生了实际的责任分工。ESnet 控制其主干网和服务。一个连接站点控制其校园设备、数据传输节点(DTN)、本地安全和电力。ASCR 控制项目级别的资金。科学项目定义延迟或故障的后果。国际合作伙伴控制他们自己的网络。只有当这些不同的决策域保持对齐时,完整的工作流才能运转。(ESnet 领导层;治理)
ESnet4 将普通 IP 流量与大型科学流量分离
在 21 世纪第一个十年的中期,分布式实验开始改变流量特征。大型强子对撞机(Large Hadron Collider)将在 CERN 产生数据,并通过全球实验室和计算中心的层级体系分发。通用的互联网连接仍然必要,但少量科学传输可能规模过大,足以挤占普通链路。为这两种模式构建一个无差别的网络,使得管理容量和提供服务保证变得更加困难。
ESnet4 以混合架构作为回应。一个 IP 核心承载通用科学通信。一个分离的“科学数据网络”(Science Data Network)利用大容量光电路支持大型数据流,并允许动态路径配置。城域环连接主要实验室,而与 Internet2 和国际合作伙伴的协作则将系统扩展到能源部站点之外。
区别并不仅仅在于快慢流量之间。通用 IP 服务需要广泛的覆盖和弹性路由。一次有计划的数 TB 传输可能更适合使用预留的二层路径,其开始时间、容量和端点都是已知的。科学数据网络认识到,一小部分可预测、高价值的流量可以适用不同于传统数据包转发的控制模型。
OSCARS 在这一背景下诞生。按需安全电路与提前预约系统允许授权用户或应用程序在指定时段内请求网络资源。系统需要找到一条路径,检查拓扑和策略约束,预留容量和 VLAN 资源,在设备上创建状态,并在预留到期后移除该状态。它将原本需要手动协调的任务变成了软件可以请求的服务。
ESnet4 还表明,裸速度已不再是唯一的瓶颈。一条预留电路或许能保护远程网络上的容量,但如果存储系统无法足够快读取数据,或本地防火墙丢弃数据包,应用程序仍可能缓慢。这一认识直接导向了 Science DMZ 架构和端到端测量。
这一时期确立了 ESnet 设计中反复出现的模式。一个科学问题最初表现为流量需求。设施围绕该需求构建物理容量、控制机制和操作方法。当方法被证明有用时,软件和架构指导就会扩展到原始实验之外。(ESnet4 与 ESnet5 历史材料;OSCARS)
Science DMZ 将瓶颈推至机构边缘
国家主干网可以正常运行,而研究人员却面临低下的传输性能。原因很直接:主干网只是路径中的一个环节。企业防火墙、共享的校园核心、老旧路由器、不足的服务器、数据包丢失以及存储限制,都可能将高容量路径降到其设计速率的一小部分。
Science DMZ 是 ESnet 对这一端到端现实的回应。该架构将数据传输节点(DTN)放置在靠近受控机构边界的高性能路径上。安全策略针对这些系统暴露的有限服务进行定制,而不是迫使持续的科研流穿过为多种企业应用类别设计的通用状态防火墙。
这一表述可能被误解为建议取消安全。一个 Science DMZ 仍然依赖于加固的主机、路由器上的访问控制列表、监控、漏洞管理、有限的应用暴露和运维纪律。设计改变的是实施控制的位置和方式。它避免在主路径上放置一个性能或会话行为不当的设备,仅仅因为该设备是机构常规安全标准的一部分。
性能测量与架构集成在一起,而非一个可选面板。perfSONAR 节点执行受控的吞吐量、丢包、延迟和路径变化测试。当两个站点对一次传输产生分歧时,测量可以帮助定位问题是始于主机、本地链路、区域网络、ESnet 主干网还是国际伙伴。没有这些证据,每个运营者都会声称自己的网段是健康的,而研究人员仍然无法传输数据。
数据传输节点(DTN)也需要专门的工程。网卡、CPU 插槽、内存、磁盘或并行文件系统、TCP 缓冲区和传输软件决定了可达到的吞吐量。Fasterdata 指南和 ESnet 的技术咨询将这些细节转化为可重复的实践。这种方法已远播能源部实验室之外,但 ESnet 并不运营每一个使用该名称的设施。
Science DMZ 之所以有影响力,是因为它将采购问题转变为系统问题。获取更快的电路并不能解决其他环节受限的路径。有用的性能单位是从存储到存储或从仪器到计算的完整工作流,其中每个管理域都被测量,并与清晰的责任相关联。(Science DMZ 指南;网络性能工具)
ESnet5 将洲际 100G 引入生产
后续的容量跃迁得到了先进网络倡议(Advanced Networking Initiative)和美国经济刺激计划资金的支持。ESnet 通过《美国复苏与再投资法案》(American Recovery and Reinvestment Act)获得 6200 万美元,用于开发 100 Gbps 远程原型并支持向 ESnet5 迁移。这一投资涵盖的不仅是新路由器。ESnet 在一项国家光纤基础设施上获得了频谱容量权,这使该计划在波长部署和升级方面拥有更大的控制力。
ESnet5 于 2012 年末投入生产。当时,能源部和 ESnet 将其描述为世界上速度最快的科学网络。这一历史性声明与当时开创性的洲际 100G 部署相关联。在 2026 年,不应不加限定地将其当作一个世界排名来重复。如今,科研网络通过不同的度量来公布容量,包括单接口速率、主干网聚合容量、光谱带宽和实验性演示。现有证据无法提供一项中立的当前比较来确立一个普遍赢家。
100G 的经济效应远不止于接口速率十倍的提升。科研项目可以规划那些此前会占用链路更长时间的常规远程传输。实验室可以将部分计算或存储集中化,而不必在本地复制。国际合作获得了一个能力更强的北美主干网。新容量也更快地暴露了本地限制,提升了 Science DMZ 和 perfSONAR 的价值。
ESnet5 保持了数据包服务与专用科学路径之间的混合关系,并进一步深化了自动化的重要性。在 100G 规模下,在一个国家基础设施中预留容量、诊断故障和维护一致的服务,不能仅仅依赖设备的一次性配置。
该项目展示了公共基础设施投资如何在单个实验用满整个网络之前改变科学选项。容量为未来仪器创造了余量,但这种余量不等同于零售产品闲置时的浪费。其价值包括避免实验延迟、容纳故障以及允许新工作流在无需等待又一个建设周期的情况下进行测试。
这一逻辑也需要纪律。公布的容量需要与实际科学利用相关联,投资必须在预测变化时保持适应性。ESnet 后续在遥测、缓存和编排方面的工作,反映了从每个已安装比特中获取更多科学价值的努力,而不是将持续的物理扩展当作唯一答案。(ESnet5 历史公告)
ESnet6 是一个光、包和软件系统
ESnet6 项目始于 2017 年,并在约六年的设计与建设后,于 2022 年 10 月 11 日公开发布。伯克利实验室报告称,发布时总容量超过 46 Tbps,分布在约 1.5 万英里的专用基础设施上,主干链路介于 400 Gbps 和 1 Tbps 之间。2024 年年度报告随后记录了 57 Tbps 和高达 1.2 Tbps 的链路。这些数字属于不同时间点,描述的是不断扩展的系统,而非对静态网络相互矛盾的定义。
物理层包含长距离光纤路径、光线路系统、放大器、频谱权益、共址设施和本地入网点。2024 年报告统计了 278 个配有光放大器的站点。相干光学在光纤中承载多个高速信道,而放大器和可重构光设备则维持信号水平并路由波长。地图上呈现的某个路径可能通过暗光纤、频谱、受光照服务或与合作伙伴的协议来控制。1.5 万英里的描述并不能确定能源部对所有电缆拥有法定权利。
在光层之上,路由器和业务边缘提供 IP、专用路由环境、二层服务、对等互联以及与云的连接。年度报告统计了 78 个配有路由器的站点。单个站点可按需求以 10、100 或 400 Gbps 连接,而主干链路则可聚合多个接口或波长以达到更高数值。
软件层使 ESnet6 有别于仅仅基于容量的升级。自动化维持设备和服务状态。可编程遥测为运营者提供更精细的证据。OSCARS 配置预留路径。SENSE 试验跨不同域的面向应用协调。High-Touch 利用可编程硬件生成对数据包和流的更高可见性。API 和测试床接口使得成功的研究能够向运营推进。
建设还更加强调弹性。多样化路由、站点多入方向、独立电力、备用路由器和高可用性位置,降低了单一故障导致实验室脱离国家系统的可能性。这些保护措施范围不同。冗余主干网无济于事,如果两条本地电路经过同一管道;第二个路由器也无法提供弹性,如果两台设备依赖同一路供电。
因此,ESnet6 应被理解为一个分层设施。光纤创造物理覆盖。光学创造容量。路由器创建数据包服务和专用网络。软件创造可重复性和可编程性。测量验证所承诺的路径确实有效。组织协议使得穿越 ESnet 并不拥有的边界成为可能。(ESnet6 发布;2024 年年度报告)
57 Tbps 意味着什么——以及不意味着什么
网络统计数据经常将多个层面压缩到一个数字中。ESnet 公布的 2024 年 57 Tbps 代表分布式工程总容量。该数字并不对应单条物理链路、每个实验室的可用吞吐量或任何时刻承载的流量。同一份报告描述主干链路在 400 Gbps 至 1.2 Tbps 之间,美国 7 个站点连接速率达到 400 Gbps 或更高,以及 2.7 Tbps 的跨大西洋容量。每个数字回答一个不同的问题。
报告还描述了在约 1.5 万英里基础设施中,78 个站点配有路由器、278 个站点配有光放大器。该网络连接了全部 17 个能源部国家实验室,记录了 28 个能源部用户科学设施、与 5 个国家的 277 个科研与教育网络、商业网络及其他类型网络的关系、超过 3 万组织用户,以及分布在美国 24 个州的 137 名员工和承包商。这些数字描述的是不同的人群,不应像客户总数那样相加:路由器、设施、伙伴网络、机构用户和员工队伍是各自独立的度量。
站点连接代表机构边界的容量。主干链路代表网络点之间的容量。一个光系统可能承载多个波长,而一个逻辑服务可能只使用物理层的一部分。总容量加总了那些无法同时服务于相同源和目的的多种资源。流量规模度量的是随时间传输的数据量,而非某个瞬间可用的最大速率。
ESnet 在 2024 日历年内承载了 1.77 EB 流量,高于 2023 年的 1.7 EB。4% 的增长与自 1989 年以来该设施报告的约 55% 的历史平均年增长率相比处于低位。单独一年并不能证明科学需求已经平稳。大型项目启动时间不规则,软件变更可能减少传输量,一项实验或国际事件可能迅速改变流量构成。
流量也是集中的。2024 年报告指出,大型强子对撞机活动约占总流量的一半。Fermilab 是最大的外部发送方,达 136 PB;NERSC 是最大的能源部接收方,达 75.3 PB;橡树岭是最大的能源部发送方,达 58.3 PB。这些数字揭示了重要负载,但并不构成完整的科学价值排名。一次较小的传输可能更紧迫,或支持独一无二的仪器。
容量规划因此需要同时兼顾多个视角:平均和峰值流量、按路由的利用率、故障余量、站点链路速率、科学时限和未来需求。仅仅围绕平均利用率设计的网络,可能在超新星或电缆断裂期间失效。仅仅为最大理论事件设计的网络,可能造就昂贵且缺乏灵活性的资产。
ESnet 的工程问题是,将容量置于需要它的工作流能够到达的地方,然后验证端点系统能否利用它。这就是为什么容量数字应与 Science DMZ、测量、编排和需求评审一并呈现,而不是作为页面顶部一个自解释的排名。(ESnet by the Numbers)
AS293 为使命路由,而非为零售市场
ESnet 的公开自治系统编号是 AS293。该网络与能源部站点、科研与教育网络、商业网络以及付费转接提供商交换路由。路由策略决定哪些路径可以承载科学流量、如何处理故障以及哪些外部网络获得直接互联。
对等策略具有选择性。潜在对等方需要使用 BGP,在互联网路由注册处(Internet Routing Registry)和 PeeringDB 中保持最新信息,避免基于 RPKI 发布的无效公告,并遵循与 MANRS 相关的路由安全实践。ESnet 要求 IPv6 或双栈对等,不接受纯 IPv4 的新关系。直接私密互联以 100G 端口为起点,强烈偏好 400G。
这些条件反映了使命和运营成本。一个直接互联会消耗端口、工程时间和监控能力。ESnet 不需要仅因为存在公开路由就与所有网络建立对等。它寻求那些能改善能源部科学路径、减少转接依赖或连接重要合作者的关系。对公共互联网的访问由来自 Hurricane Electric 和 Lumen 的付费转接进行补充,以弥补通过科研网络或直接对等无法有效到达的目的地。
网络发布 BGP 社区属性,用以区分连接至 ESnet 的站点、科研与教育网络及商业网络。连接机构可以利用这些标记实施策略,尽管后续解读仍超出 ESnet 的控制。一个社区属性是描述性元数据,并非所有网络都会做出相同路由决策的普遍保证。
路由安全同样存在限制。拒绝 RPKI-invalid 的公告可以阻挡一类重要的路由错误,但不能阻止所有泄露、受攻击的对等方、意外宣告的有效源或错误的源授权。劫持监控可以发现非预期的源变更,但检测可能在传播之后发生。黑洞路由可以通过丢弃发往某个地址的流量来在攻击期间保护一个站点,但这种保护是以牺牲受影响前缀的可达性为代价的。
面向使命的设计体现于服务边界。ESnet 承载公共 IP 流量,但并不寻求为消费者赢得转接市场。其路由策略围绕科学覆盖、弹性和可信互联来组织。网络的价值来自它为所服务社区创造的路径质量,而非最大化连接到 AS293 的零售客户数量。(ESnet 对等政策)
物理连接、专用服务和云路径
ESnet 的服务目录始于物理连接。符合条件的站点可以以 10、100 或 400 Gbps 本地连接或通过远程入网点连接。当设施远离专用基础设施时,服务入口可在暗光纤或运营商提供的光照线路上实现。接入设计是科学路径的一部分,由供应商提供的最后一公里网段可能成为主要的性能限制或主要故障点。
三层 IP 服务提供 IPv4 和 IPv6 的路由连接。三层虚拟专用网为一个拥有多个站点的项目创建逻辑上独立的 IP 和 BGP 环境,同时与其他服务共享物理基础设施。二层虚拟专用网提供点到点或多点以太网连接,可静态配置或通过 OSCARS 动态配置。这些服务使实验能够连接设施,而不必将所有关系暴露于公共互联网。
专用服务不意味着物理隔离。逻辑隔离依赖于路由器配置、标记、路由实例、访问控制和操作实践。共享平台的故障可能影响多个服务,而配置错误可能破坏预期隔离。其价值在于受控的分段和可预测的连接性,而不是声称不存在共享依赖。
Cloud Connect 将 ESnet 路径延伸至主要商业云环境,包括 AWS、Microsoft Azure、Google Cloud 和 Oracle。站点可以通过专用的二层或三层连接到达云提供商的接入点,而不依赖公共互联网的普通路由。这可以改善路径控制并减少对变动转接的暴露,但不能消除云端安全、提供商故障、身份设计、数据出口费用或区域可用性方面的问题。
与云的关系显示了 ESnet 的角色正在演变。能源部科学已不仅仅存在于联邦实验室和超级计算机中。研究人员可能使用商业对象存储、专用服务或按需计算。ESnet 需要连接这些资源,同时不声称云是联邦网络的一部分,或一条专用电路能自动使一个云账户变得安全。
其他服务包括辅助 DNS、网络时间、路由劫持监控和黑洞路由。每一项处理一项辅助性依赖,这些依赖可能在光容量仍然可用时中断研究。一次域名故障、错误的时间、一次路由泄露或拒绝服务攻击,都可能在不损坏光纤的情况下使一个科学系统无法使用。
综合来看,服务目录代表网络各层之间的一系列操作契约。物理连接建立路径。路由创建覆盖。专用服务创建逻辑边界。云互联将系统延伸至商业基础设施。安全与辅助服务减少已知故障模式。用户仍需在每一端构建功能正常的端点和本地网络。(ESnet 网络服务目录)
OSCARS 使容量变得可预订
绝大部分互联网流量在数据包到达时使用可用容量。这种模式对通用通信很有效,但某些科学传输是预先计划的、规模庞大,且延误代价高昂。OSCARS 允许授权用户和应用程序在指定时段内预订网络资源。
一个预订可以指定端点、起止时间、容量、VLAN 信息、排除的路由和其他约束。系统审视拓扑和现有承诺,找到一条可接受的路径,在网络中创建所需状态,并在预订结束时将其移除。该服务需要防止同一稀缺资源被重复分配,并考虑影响可用拓扑的维护或故障。
其重要性在于操作层面,而非表面好看。手动配置一条电路可能需要数日跨部门协调。而一次编程式预订可以在数分钟内创建,并成为实验工作流的一部分。网络不再是一个固定的后台管道,而成为软件可以随同存储或计算一并请求的资源。
OSCARS 是一个开源生产系统,已被其他网络和测试床采用或评估。部分公开的采用量度出现在也包含历史内容的页面上。安全的结论是,该系统已扩展到 ESnet 之外,但不应假设榜单上列出的每项部署都仍然现行或在技术上完全相同。
一个预订并不保证应用程序的吞吐量。它可以保护一定数量的网络容量,但不能使存储服务器读取得更快,修复校园网络中的数据包丢失,或调整操作系统。如果应用程序仅达到预订速率的一小部分,诊断就需要回到端到端路径。
预订也引入了分配问题。一项优先度高的实验可以从有保证的容量中获益,而未使用的预订可能降低其他用户的灵活性。策略需要决定谁可以请求该服务,如何解决冲突,以及一个预订是否可以为另一个让位。这些决策属于设施治理的一部分,即使配置代码是自动的。
OSCARS 仍然是 ESnet 应用软件转化为基础设施的最清晰实例之一。它将一种操作实践转变为可重复的服务,在授权周围保留了人类策略,并为科学应用提供了一种表达网络需求的受控方式。(OSCARS)
SENSE 尝试将网络与端系统协调起来
一条预留的网络路径只解决分布式工作流的一部分问题。存储系统、传输服务和计算资源也拥有各自的可用性、容量和策略。SENSE——面向百亿亿次科学端到端联网的软件定义网络(Software-defined network for End-to-end Networked Science at the Exascale)——将编排扩展到单张网络域之外。
该项目将网络和端系统表示为可发现的资源。一个科学应用可以描述预期结果,比如在特定速率下在两个设施之间传输数据集。SENSE 汇总参与域的模型,协商资源,配置网络和传输服务,观察遥测数据,并在工作流结束时释放资源。
这比起配置单条电路要困难得多。参与组织维持它们自己的权威和数据模型。一个域可能暴露容量,而另一个域暴露存储端点或传输服务。策略、凭证和维护窗口各不相同。SENSE 需要协调这些要素,而不假设一个中央控制器可以命令所有系统。
在 2024 年大型强子对撞机数据挑战中,启用 SENSE 的工作流在加州理工学院(Caltech)和加州大学圣迭戈分校(UC San Diego)之间维持了 330 Gbps。这一结果表明,面向应用的编排可以在一个特定真实工作流中以可观速率运行。这并不能证明 SENSE 已成为所有 ESnet 站点的通用生产服务。2024 年报告仍将该工程描述为研究阶段。
OSCARS 与 SENSE 的区别揭示了自动化单元的一种演进。OSCARS 在一个已知服务域内预留网络资源。SENSE 则试图协商一条包含属于不同组织系统的完整路径。前者具有更清晰的生产边界。后者提供更大的科学价值,但承载更多的治理和集成风险。
对运营者而言,实际问题是当故障出现时谁来负责。当应用声明一个意图而工作流性能不佳时,原因可能出在资源模型、网络、存储、某个凭证、应用或域间同步问题上。编排需要提供足够精确的证据,以向每个运营者显示所协商状态的哪一部分出现了偏离。
SENSE 指向的应用能够请求结果而不只是电路的基础设施。其进展应由在多域之间可重复的生产使用、清晰的支持责任以及在部分故障下恢复的能力来衡量,而不仅限于最高演示速率。(SENSE;2024 年应用研究)
EJFAT 将科学事件直接发送到远程计算
传统的科学数据移动通常遵循基于文件的顺序。实验产生数据,本地系统进行处理直到可以写入文件,文件进入存储,随后的一次传输将其发送到另一个设施进行分析。这种模式已被充分理解且操作可靠,但延迟反馈,并要求本地存储和计算规模达到采集峰值。
EJFAT——ESnet–Jefferson Lab FPGA 加速传输(ESnet–Jefferson Lab FPGA Accelerated Transport)——提供了一条不同的路径。它将实时事件数据封装在 UDP 中,从仪器直接分发至可用的计算工作者节点,有可能是远程超级计算中心。一块基于 FPGA 的可编程智能网卡读取事件标识符,并将属于同一事件的所有分片发送到同一个工作者节点。随着计算节点的可用或繁忙,控制系统可以改变分发。
事件分组至关重要。一个通用的负载均衡器可能将数据包分发到多个服务器,但科学处理可能要求某个探测器事件的所有分片到达同一个工作者。EJFAT 将高速转发功能与计算工作者的调度分开,使每一侧能独立扩展。
2024 年 4 月,一次演示将来自弗吉尼亚州 Jefferson Lab 的数据以 100 Gbps 流式传输至加利福尼亚州的 Perlmutter 超级计算机,进行实时处理,省去了中间的磁盘步骤。据 ESnet 报告,后续测试利用了多个设施的计算资源和约 2 万个核心。这些都是特定的演示,并非保证每个仪器都可以在无工程变更的情况下采用该系统。
稀有同位素束流设施(FRIB)提供了一个更近期的操作实例。ESnet 于 2026 年 7 月报告,研究人员通过 EJFAT 以约 5–6 Gbps 将原始实验数据流式传输到远程超级计算机。一次在 15 小时内产生 615 GB 的运行,在 Perlmutter 的 8 个节点上使用机器学习推理,仅用 20 分钟处理完毕。低于之前 100G 演示的网络速率并不降低该成果的重要性;科学收益在于真实工作流中更快的反馈。
实时流传输改变设施的经济性。一台探测器可以利用共享计算资源,而不必为所有峰值构建充足的本地能力。研究人员可以在稀缺束流时间仍可用时审视结果。该系统也创造了新的依赖。一次网络中断、一次计算分配问题或一次事件分发中的差错都可能实时影响实验,而不仅仅是延迟一次后续文件传输。
EJFAT 仍是一个先进原型或新兴平台,而非得到普遍支持的服务。生产化采用将需要与仪器集成、安全、FPGA 可用性、操作责任、调度协议以及当 UDP 数据包丢失时明确定义的行为。其重要性在于展示远程网络可以成为采集循环的一部分,而不仅仅在其后发挥作用。(EJFAT;FRIB 科学亮点)
High-Touch、perfSONAR 和 iperf3 使路径可观测
一个高容量网络可能以聚合利用率图表无法揭示的方式发生故障。短时的突发流量可能填满一个队列,数据包可能乱序到达,丢包可能只影响一个方向或一个流量类别,而路由可能在测试之间改变。与安全相关的流也可能在统计采样中消失。
High-Touch 利用可编程硬件和软件,收集比传统采样日志更精细的数据包和流遥测。2024 年,它被用于调查大型强子对撞机的吞吐量、与鲁宾天文台(Rubin Observatory)流量相关的数据包重排序以及安全事件。目标是获得诊断精度,并识别出聚合流量总计会掩盖的行为。
更精细的证据有其成本。数据包和流信息需要存储、处理、访问控制和仔细解读。它们可能揭示通信端点、协作模式以及科学活动的时间安排。一个为提高运营可见性而设计的系统因此成为一个敏感的数据资产。
perfSONAR 处理另一层。它是由多个组织合作支持的分布式测量系统,ESnet 是其核心参与者和创始成员。据报告,2024 年全球超过 2000 个站位,ESnet 运营超过 30 个站点。受控测试测量参与节点之间的吞吐量、延迟、丢包和路径行为。
分布式设计是关键。一位研究人员可能报告传输缓慢,但设计良好的 perfSONAR 节点之间的测试可以显示底层路径是否支持预期速率。方向性测试可以隔离不对称性。重复测量可以揭示性能下降是何时开始的。traceroute 数据可以发现路径变更,尽管观察到的路由与实际应用的转发行为可能不同。
iperf3 在 TCP、UDP 或 SCTP 上提供主动吞吐量测试,支持 IPv4 和 IPv6。ESnet 维护该开源工具,并报告在特定条件下,在 200G 路径上测试超过 150 Gbps。一次合成测试并非应用基准。它帮助确定主机和网络在受控条件下能否承载流量,之后可以单独分析存储和应用行为。
综合来看,High-Touch、perfSONAR 和 iperf3 提供了现实的不同视图。High-Touch 以更高精度观察生产流。perfSONAR 提供多个域之间计划或按需的测量。iperf3 直接测试端点和网络的吞吐量。没有一个视图是完整的,但组合起来减少了从单个运营者本地仪表盘诊断分布式故障的诱惑。(网络性能工具;2024 年运营创新)
缓存可以消除流量,而非更快地传送
增加容量并非改善科研网络的唯一方式。某些数据集被同一区域的研究人员重复请求。每次都将拷贝经由远程网络传送会浪费容量并增加延迟,即使主干网能够吸收负载。
ESnet 的 2024 年应用研究报告描述了由科学数据社区使用的五个区域缓存节点。在所研究集合中,缓存平均每天减少 33 TB 的远程流量。三分之二的请求被本地满足,缓存平均命中率为 94%。效果因地点而异:报告的远程流量减少在南加州达到 69.3%,在芝加哥为 48.4%,在波士顿为 6.6%。
这些差异富有信息量。缓存的价值取决于数据集的流行程度、本地用户、存储大小、淘汰策略和服务配置。一个放置在反复分析相同数据的社群附近的缓存可以消除大量传输。一个服务于多样或很少重复数据集的缓存可能消耗存储却不产生同等效益。
缓存也改变了控制权。网络运营者开始参与数据放置,同时科学社群需要决定哪些数据集可以被复制,更新将如何维持,以及谁有权访问。存储故障和过时内容成为与网络相邻的运营关切。
该研究显示了为何最高效的比特可能是从未进入主干网的那一个。光升级增加供给。缓存改变需求。工作流调度可以将传输移到利用率较低的时段。本地压缩或过滤可以在传输前减少数据。一个成熟的基础设施计划评估所有这些机制,而不是仅以已安装的 Tbps 来衡量进展。
该结果应被限定在所研究的部署范围内。它不能证明每个科学数据集都将达到 94% 的命中率,也不能证明缓存可以替代用于一次性实时数据流的新增容量。它提供了数据架构和网络架构可以联合设计的证据。(2024 年应用研究活动)
跨大西洋科学需要实体多样性与容量
ESnet 的国内基础设施不能与其国际义务分离。高能物理围绕大西洋两岸的设施和计算中心组织,2024 年年度报告将 ESnet 约一半的流量归于大型强子对撞机活动。因此,欧洲与北美之间的一次电缆故障可能影响核心科学负载,即使所有国内路由器继续工作。
在 2024 年及 2025 年初,ESnet 将报告的跨大西洋容量从约 700 Gbps 提升至 2.7 Tbps。该项目的一项重要内容是,与 Aqua Comms 达成一项 15 年协议,获取一条连接纽约、都柏林和伦敦的海缆路由中四分之一对光纤的权益。ESnet 还在多个光缆系统上与 GÉANT 共享容量和成本。工程目标是在四条物理上多样化路径上实现至少 3.2 Tbps,并能将架构扩展至超过 10 Tbps。
容量与多样性之间的区别至关重要。两种逻辑服务可能共享一条电缆、一个登陆站或一个陆地管道并一同失效。海底维修可能需要故障定位、许可、电缆船、合适的天气条件和对受损光纤的物理回收。恢复可能耗时数周或数月。因此,ESnet 规划同时发生三起电缆故障的场景,而不是假设一条备用路由就足够。
长期频谱权使设施在升级方面比重复购买成品电路拥有更强的掌控力,但也造成了对特定电缆系统、登陆基础设施和运营伙伴的承诺。ESnet 无法通过签订频谱合同来消除海洋风险。它获得了跨多个系统设计容量和弹性的能力,但仍依赖于电缆所有者、维修流程和伙伴网络。
这也是“专用”一词需要谨慎的另一个语境。ESnet 在关键路由上控制专用权益和基础设施,但物理资产模式各异。国内和国际路径可能涉及暗光纤、频谱、受光照服务、共址和合作伙伴容量。地图上的一条线并不能揭示所有网段拥有同等程度的所有权或维修权威。
与 GÉANT 的关系显示了科研网络何以可以在不被中央控制的情况下实现合作。两个组织可以共享成本并协调科学流量,但各自仍然对其机构成员负责。端到端性能仍然依赖于超出两条主干网控制范围的国家科研网络、校园系统和实验设施。(跨大西洋里程碑;2024 年年度报告)
科学需求结合持续规模、罕见峰值和严格时限
大型强子对撞机提供持续规模。其分布式计算模型将实验数据在 CERN、Fermilab、布鲁克黑文(Brookhaven)、大学和其他中心之间移动,产生持续的国际流量。规划中的高亮度运行预计将增加探测器数据、模拟和复制。网络需要常规地承载庞大的数据流,同时保持足够的路由多样性以经受电缆或设施故障。
维拉·C·鲁宾天文台(Vera C. Rubin Observatory)施加一个时限。该位于智利的望远镜被设计成每 30 秒生成一幅约 13 GB 的图像。数据路径允许在 SLAC 进行快速处理,并对暂现天体发出警报,以便其他天文台响应。ESnet 报告的目标是,将每张图像在约 1.2 万英里的路程上以少于 7 秒的时间传输。该路径包括南美洲和其他国家的伙伴科研网络,因此结果依赖于超出 ESnet 域的协同工程。
DUNE 产生一个例外峰值。在一次超新星过程中,中微子项目预计需要在 100 秒内移动高达 600 TB 的数据。在 20 年中,该项目预计将产生约 900 PB。这些是针对未来运营的计划需求,而非对当前流量的描述。它们之所以重要,是因为这一事件不可在容量就绪后重新安排。一个仅围绕平均利用率建设的网络,可能在该时刻科学价值最高时失效。
聚变研究将国际距离与一个长周期发展结合起来。2026 年 5 月,一次测试将 176 TB 的 ITER 数据从马赛传输到位于圣迭戈的通用原子公司(General Atomics)DIII-D 设施,速率将近 80 Gbps。ITER 当时仍在建设中,因此该传输展示了准备状态,而非全规模正常运营。需求材料预测,未来一些聚变工作流将约为每天 2 PB 且至少 200 Gbps。
FRIB 和 Jefferson Lab 展示了第三种模式:实验可能在数据仍不断进来时就需求远程分析。EJFAT 允许事件流到达位于 NERSC 或橡树岭的计算资源,而无需等待文件完成和复制。光源、电子显微镜和其他仪器面临类似的本地过滤、远程 AI 推理以及结果需多快返回给操作者的决策。
气候与地球科学再次扩展需求。大规模模拟和观测数据集在计算与存储设施之间移动,而野外传感器可能位于常规光纤不可用之处。没有任何一个公布的速率能代表所有这些需求。ESnet 需要在同一个设施模型中满足持续的批量传输、罕见峰值、低延迟反馈、国际合作和远程采集。(鲁宾天文台案例研究;DUNE 案例研究;需求评审)
需求评审将科学计划转化为网络架构
ESnet 不能等到实验产生第一批数据集,才去签订光纤、路由器或跨大西洋容量。远程协议、设备采购、站点建设和软件开发需要数年时间。因此,该设施与能源部科学项目进行 5 至 10 年时间跨度的需求评审。
研究人员和设施人员描述仪器、预期数据量、存储位置、计算目的地、时间约束、国际伙伴、云使用和弹性需求。网络和计算专家随后分析整个工作流。一项对更高速链路的要求可能揭示出本地存储、路由多样性、安全架构或传输软件方面更重要的问题。
评审过程是一种协同设计形式。科学项目解释他们试图实现什么;ESnet 则将目标转化为基础设施依赖,并测试所提路径是否可行。结果可能影响站点连接容量、新路由、海底合同、Science DMZ 部署、编排研究、人员配置以及下一代网络的时间表。
分别于 2025 年完成并于 2026 年 1 月发布的“高能物理”(High Energy Physics)主要评审,涉及 127 名参与者,在一份约 400 页的报告中涵盖 14 个案例研究。其重要性不在于保证所有预测都正确。仪器可能延迟,软件可能变得更高效,新的负载可能出现。价值在于一份有文档记录的依据,使研究人员、网络工程师、计算中心和资助者能够看到相同的前提,并经过深思熟虑加以修正。
预测依然困难,因为科学需求是不连续的。一次超新星可能在实验生命周期中永远不会发生,而一个 AI 工作流的增长速度可能快于正式评审周期。平均流量增长对预算有用,但不能代替逐案规划。2024 年 ESnet 流量异常低的 4% 增长,并不能证明长期需求已经停滞;它表明单独一年不应决定一项持续数十年的基础设施计划。
需求评审还分配责任。一个实验室不能假设国家主干网会修复不当的校园路径,ESnet 也不能假设一个科学项目会在容量建成后去适应。将依赖关系放入一个共享计划,将使得后来的分歧更加具体可查。(需求评审报告)
无线边界和 QUANT-NET 测试设施的边界
一个国家光纤网络很好地服务于固定机构。科学仪器并不总是在这些位置运行。地热田、环境观测站和临时行动可能没有运营商覆盖、可靠电力或经济可行的光纤路由。ESnet 的“无线边界”(Wireless Edge)项目研究私有蜂窝网络、Wi-Fi、定向无线电和卫星系统如何能将一个科学工作流扩展至这些地点。
2026 年 6 月公布的内华达州某地热部署,结合了使用 CBRS 频谱的私有 4G、远程 Wi-Fi HaLow、常规 Wi-Fi、Starlink 回传、定向无线电和自带电源的便携式塔架。该设计针对单一现场条件。它不是 ESnet 通用的无线产品,无法提供远程光纤那样的持续容量。地形、天气、频谱、电力和卫星服务提供商仍然是服务路径的一部分。
更重要的组织点是,ESnet 并未在最近的光纤点停下,将剩余部分视作其他机构的责任。其科学对接职能将采集、回传和远程传输视为单一工作流。这种方式的潜在价值可能大于统一的标准化产品,因为偏远科学地点面临不同的物理约束。
QUANT-NET 探索另一条前沿。这个由 ASCR 资助的项目正在构建一个三节点的量子网络测试床,连接伯克利实验室和加州大学伯克利分校的两个地点,距离约 5 公里。工作包括离子阱、光子耦合、纠缠交换、贝尔态测量、对时间敏感的控制以及模块化的软件框架。
与 ESnet 的关系主要体现在控制与编排方面。量子实验需要经典通信、精确的时间同步以及在仍很困难的设备之间进行协调。开源控制软件可以使实验更具可重复性并减少手动调参。该测试床不是一个生产级量子互联网,不会通过纠缠承载大量的常规科学数据。
因此,Wireless Edge 和 QUANT-NET 应当根据它们所教导的以及可复用的东西来评价。两者均未证明每个 ESnet 用户都将获得无线接入服务或一条量子链路。它们将设施的研究职能延伸至未来科研网络可能需要新物理介质和控制系统的领域。(无线边界部署;量子网络研究)
美国科学云和 ESnet7 将规划单元从站点转向工作流
“综合科研基础设施”(Integrated Research Infrastructure)项目及初现的“美国科学云”(American Science Cloud)反映了能源部描述其设施方式的一种转变。这些项目旨在让仪器、网络、数据存储库和超级计算机,作为一个面向科学数据、AI 和高性能计算的联邦环境运行,而不是把它们当作互相独立的服务。
ESnet 的作用在于连接和编排。数据需要从仪器移至存储和加速器;用户和服务需要受控访问;工作流需要发现可用资源;遥测需要显示系统是否达成了科学目标。EJFAT、SENSE、OSCARS、Cloud Connect 和 High-Touch 处理其中一部分问题,但单独来看,没有一个构成“美国科学云”。
在 Confab26 上,Inder Monga 被确认为“美国科学云”项目副总监,项目议程包含了面向下一代网络的演示和规划。这是存在积极机构工作的证据,而非在 2026 年 8 月一个通用科学云已完成的证明。访问策略、连接资源清单、生产支持和治理当时仍是发展中的问题。
ESnet7 出现在相同的规划语境中。名称是真实的,创新会议探讨了遥测、数据包检测、数据移动、AI 和量子网络。然而,ESnet6 仍是当前的生产代际。在现有证据中,尚未识别出最终的公开架构、设计基线、供应商选择、完整预算或发布日期。
这一区分很重要,因为网络代际远在设备安装之前就产生了期望。一个规划项目可以影响研究优先级、供应商参与和资本请求。它不应被描述为一个已建成的主干网。最站得住脚的解释是,ESnet 正利用 ESnet6 的运营经验以及当前的工作流项目,来决定第七代网络应该是什么样子。
速度将继续重要,但证据表明可编程性和智能可能变得同样核心。一条更快的链路不会告诉应用程序哪里有可用计算,不会识别微突发,不会调度一条探测器数据流,也不会证明一个跨多域的服务已正确终止。ESnet7 的战略问题是,网络应在多大程度上理解和协调科学工作流,而不变成一个无法管理的中央控制器。(Confab26 议程;2024 年应用研究)
联邦资金支持该设施,但预算科目不是营收
ESnet 并不靠在公开市场上出售容量来为其主干网提供资金。能源部主要通过 ASCR 的“高性能网络设施与测试床”活动来资助它。2027 财年的预算请求为该计划科目提出 1.03 亿美元,而此前批准金额为 9726.1 万美元。
这些数字是该计划规模最好的公开指标,但并不构成一份 ESnet 的损益表。该科目还支持与网络相关的测试床、软件维护、升级和研究活动。它并未揭示生产主干网的单独年度运营成本、每一代网络的资本投资或与各站点连接相关的收入。
公共资助使该设施能够在需求变得具有商业性之前进行投资。它可以获取长期频谱、维护开源工具、支持小规模但高科学价值的实验,并构建超过即时利用率所能证明的路径多样性。同一模式也产生对国会拨款、部门优先级和伯克利实验室运营架构的依赖。
站点连接并非总是免费。ESnet 的“站点用户成本政策”允许机构用户根据赞助、资格和增量需求承担相关连接费用。该关系是以站点为单位的,而非单个研究人员。ESnet 并不单独向最终用户收费或进行注册。
独立账目的缺失限制了财务分析。公开材料未披露完整的供应商集中度、工资表、折旧表、按路由的资产登记或年度资本预算。将 1.03 亿美元称为“ESnet 的营收”是不正确的。最准确的结论是,一个联邦计划通过一个更宽泛的活动科目,为一个生产设施、其升级、软件维护和测试床提供资金。
资金结构也影响战略选择。一个商业网络可以放弃无法覆盖成本的路由。一个公共科学设施则需要平衡国家使命、科学机会和长期能力与预算约束。这可能为没有即时财务回报的投资提供理由,但也使透明优先级和由需求评审产生的证据变得至关重要。(ASCR 2027 财年预算请求;ESCC 与站点政策)
可靠性、路由安全和遥测产生自身义务
ESnet 的 2024 年报告记录了一项令人瞩目的可用性结果:在该指标涵盖的所有 10 个科学办公室站点中,排除计划内维护后,均达到了 100% 的服务可用性。这是所有站点首次同时超越 99.9% 的要求。年度报告还提出了一个更宽泛的 99.99% 可用性数字。这些都是有用的度量,但范围不同,并不能证明所有服务、机构和国际路径均无中断。
站点弹性项目审视连接设施中的多样入口、路由器、电力和故障域。这反映了一个棘手现实:国家主干网可以是冗余的,而一个实验室仍可能依赖于单一管道或本地设备。可靠性需要延伸到建筑和数据传输系统,而不能终止于主干网地图。
路由策略提供了另一层控制。ESnet 在对等关系中拒绝 RPKI-invalid 公告,要求更新路由注册记录,并提供劫持监控和目标黑洞路由。这些控制降低了已知风险,但并不使域间路由无懈可击。一个有效的源仍可能与一次泄露或策略错误关联,黑洞路由通过使受影响目标不可达来保护其他系统。
自动化创造了类似的权衡。标准化的配置、清单和编排可以减少手动错误并加速恢复。但一个不正确的模板、策略或数据记录也可能在多个设备间迅速传播。恰当的应对包括分阶段部署、独立验证、清晰的回滚或渐进恢复流程,以及对单一自动化账户权限的限制。
运营数据值得同样的关注。设施数据政策声明,路由器利用率信息和 NetFlow 可被无限期保留,并在美国东、西海岸的存储中复制。perfSONAR 的主动测量结果保存在单个磁盘上 6 个月,无备份。路由器的利用率信息和 traceroute 是公开的,而流与安全日志的访问受限。
这并不与 ESnet 未将每个最终用户作为订阅者正式跟踪的说法矛盾。这是两个不同的系统。ESnet 不维护一对一的注册和计费关系,但网络元数据可以识别端点、通信机构、时间安排和流量模式。高保真遥测改善诊断和安全,但也增加了对最小化、访问控制、留存期审查和责任使用的需求。
最稳健的弹性模型不是一个完美可用性的宣称,而是一组具有定义边界的机制:物理多样性、站点工程、路由安全、测量、事件响应、数据治理以及发布每项度量范围的意愿。(可用性里程碑;设施数据政策;对等政策)
ESnet 代表着什么
ESnet 的历史可以被解读为一系列更快的网络:专门的前身系统、ESnet4、100G 洲际的 ESnet5 和多 Tbps 的 ESnet6。年表是真实的,但它没有抓住更重要的连续性。当裸容量不再能解决问题时,该设施反复调整了围绕科学工作的架构。
科学数据网络将异常流量与普通流量分离。OSCARS 使容量变得可预订。Science DMZ 改变了机构边界。perfSONAR 和 iperf3 将性能争议转化为测量。SENSE 将应用意图与多个管理域联系起来。EJFAT 将远程路径引入探测器循环。缓存改变了需求,跨大西洋频谱扩展了 ESnet 对国际增长的控制。
该组织的权威仍然有限。能源部和 ASCR 定义使命与资金。伯克利实验室运营该设施。加州大学根据合同管理实验室。站点协调员批准影响其机构的变更。国际合作伙伴控制他们自己的网络。云提供商、运营商、电缆所有者、设备供应商,对 ESnet 所依赖的组成部分拥有权力。
这种控制权的分布,并非软件能够消除的不便。它是科研网络运作的条件。实际的成就在于,提供足够的协调以交付工作流,同时不虚称单个机构拥有整条路径。
同样的纪律必须约束关于未来的声明。ESnet7 处于规划阶段,SENSE 在最新完整报告中仍处于研究阶段,EJFAT 是一个先进原型或新兴平台,QUANT-NET 是实验性的,美国科学云仍在建设中。当成熟度水平被精确描述时,证据最为有用。
ESnet 的长期重要性在于共享科学设施模型。网络被当作一件科学仪器来对待,具备需求、运营、软件、测量、研究和公共资助。这一模型认识到,一台探测器和一台相距数千英里的超级计算机,如果两者之间的系统未被设计成一条单一路径,所产生的联合价值微乎其微。
因此,问题不在于 ESnet 是否是根据某个通用排名最快的网络。现有证据中没有任何中立的当前度量能支持这一宣称。更站得住脚且更有用的结论是:ESnet 是世界上有文献记录的最强大的科研网络之一,其主要贡献是使端到端的分布式科学操作成为可能。(ESnet 历史;ESnet6 发布;2024 年年度报告)
来源
- ESnet 治理与政策
- ESnet 历史
- ESnet 2024 年年度报告
- ESnet by the Numbers: 2024
- 2024 年运营创新
- 2024 年应用研究活动
- 跨大西洋频谱里程碑
- 可用性里程碑
- ESnet 领导层
- ESnet 站点协调委员会
- 网络服务目录
- 对等互联与路由政策
- 设施数据管理政策
- DOE ASCR 2027 财年预算请求
- 伯克利实验室 ESnet6 发布
- ESnet4 架构与科学数据网络
- ESnet5 洲际 100G 发布
- Science DMZ
- OSCARS
- SENSE
- EJFAT
- 网络性能工具
- 科学需求评审
- 无线边界地热部署
- 量子网络研究
- FRIB 直接数据流传输结果
- 鲁宾天文台案例研究
- DUNE 案例研究
- Confab26 议程
会员简报
档案背景详情
使用相应会员等级登录,即可解锁完整简报与来源注释。
仅限 Strategic Circle
Strategic Circle
所有读者均可浏览。加入并登录后可解锁档案简报。
加入 Strategic Circle仅限 Leadership Alliance
Leadership Alliance
符合条件的 IP 资产所有者和管理层可登录查看 Leadership Alliance 简报。
加入 Leadership Alliance
