Дата-центрам ИИ нужна связность, но сети не заменяют ёмкость

Быстрый рост рабочих нагрузок ИИ меняет стратегии дата-центров: акцент смещается с простого расширения ёмкости на оптимизацию сетей. Ключевыми факторами становятся высокопроизводительные соединения и сети с низкой задержкой, необходимые для поддержки плотных вычислительных кластеров и обмена данными в реальном времени.

• IOWN Global Forum и DE-CIX утверждали, что ИИ увеличит роль распределённых площадок и низкозадержательных соединений. Это отраслевые предложения организаций, продвигающих оптические сети и услуги обмена трафиком, а не доказательство того, что ёмкость перестала иметь значение.
• Производительность ИИ зависит от нескольких разных сетей: соединений внутри ускорительной системы, фабрики дата-центра, транспорта между дата-центрами и маршрутизации до пользователей. Пропускную способность, перегрузки, разнесение путей, энергоснабжение и вычислительную мощность нужно оценивать вместе.

Сообщённое событие — это пара отраслевых аргументов

Вотчёте IT Brief от 25 мартаназваны два источника, которых не было в прежней статье. Масахиса Кавасима из NTT и IOWN Global Forum предложили распределять вычисления по меньшим площадкам, соединённым оптическими сетями с высокой пропускной способностью и низкой задержкой и привязанным к региональным источникам энергии. Генеральный директор DE-CIX Иво Иванов утверждал, что обучение, как правило, тяготеет к концентрированным вычислениям, тогда как часть чувствительного к задержкам инференса следует размещать ближе к пользователям.

Оба предложения заслуживают проверки, а не автоматического превращения в рыночный факт. IOWN разрабатывает архитектуры на основе фотоники; DE-CIX продаёт услуги соединения. Их заявления объясняют коммерческую и техническую логику распределённой инфраструктуры. Они не показывают, что всё обучение становится географически распределённым, что весь инференс должен размещаться на периферии или что сеть способна превратить удалённые мощности в единый кластер без потерь для рабочих нагрузок.

«Связность» охватывает как минимум три разных контура управления

Внутри ускорительной системы масштабируемые соединения объединяют процессоры и память. Внутри дата-центра фабрика масштабирования передаёт коллективный трафик обучения, чтения хранилища, контрольные точки и сервисные запросы между стойками. Между площадками транспорт дата-центров переносит репликацию или распределённые задания по более длинным маршрутам. Поверх этого пиринг и транзит направляют запросы инференса между пользователями, облаками и приложениями. Высокая скорость порта на одном уровне не компенсирует перегрузки, переподписку или сбой на другом.

Производственный отчёт Metaпоказывает, с чем связана внутриплощадочная проблема: для распределённого обучения в масштабе потребовалась специализированная сеть RoCE, неблокирующая архитектура, планирование с учётом топологии, балансировка нагрузки и маршрутизация.Статья Google 2025 года о Jupiterтакже рассматривает машинное обучение как одну из нескольких рабочих нагрузок, которые должна поддерживать фабрика дата-центра. Это эксплуатационные реализации у двух гиперскейлеров, а не доказательство того, что каждый оператор должен копировать одну топологию.

ВыпускUltra Ethernet Specification 1.0— ещё один полезный сигнал. Его работа над управлением перегрузками, многопутевой маршрутизацией, упорядочиванием и повторной передачей показывает, что простого добавления более быстрых портов недостаточно. Это спецификация и веха экосистемы; она не доказывает внедрение, совместимость или производительность приложений в конкретном объекте.

Ёмкость означает пригодные пути, а не заявленную скорость порта

При синхронном обучении медленный или перегруженный путь может заставить ускорители ждать во время коллективных операций. Полезные метрики включают бисекционную пропускную способность, переподписку, загрузку фабрики, потери пакетов, повторные передачи и хвостовое время завершения — а не только 400 или 800 гигабит в секунду на порту. Инференс может состоять из множества коротких запросов, но чувствительность к задержке различается: интерактивное управление может выигрывать от близости, тогда как пакетный инференс может предпочитать централизованную загрузку и стоимость.

Маршрутизация определяет, как используется эта ёмкость.RFC 7938описывает BGP с топологиями Clos и равнозатратной многопутевой маршрутизацией (ECMP) в крупных дата-центрах, включая вопросы сходимости и отказов. ECMP может распределять потоки по доступным путям; сам по себе он не устраняет коллизии, очаги перегрузки или медленное восстановление. Операторам по-прежнему нужна телеметрия, управление перегрузками, инженерное планирование ёмкости и проверенная обработка отказов.

Расстояние остаётся ограничением для рабочих нагрузок

IOWN опубликовалдоказательство концепции, в котором хранилище и вычисления GPU были разделены по полностью фотонному каналу длиной 40 километров для задачи обучения медицинской визуализации UNet3D. Это конкретное свидетельство того, что одна определённая рабочая нагрузка может работать через такой канал. Это не эталон для каждой модели, схемы коллективных операций, расстояния или условий отказа и не заставляет задержку распространения исчезнуть.

Межплощадочные архитектуры также добавляют оптические тракты, маршрутизаторы, защитное переключение, распределённое хранилище, планирование и операционную координацию. Они могут улучшить доступ к земле, энергии или отказоустойчивости, но могут создавать новые домены отказов и ограничения суверенитета данных. Сравнение должно проводиться с полной стоимостью и производительностью концентрированной альтернативы, а не с идеализированной «единой фабрикой».

Энергия и расположение сети связаны

Сетевой тезис — отчасти ответ на дефицит электроэнергии. В базовом сценарииМЭАпрогнозирует, что мировое потребление электроэнергии дата-центрами в 2030 году составит около 945 ТВт·ч, то есть чуть менее 3 % мирового потребления электроэнергии. В докладе также отмечается, что значительную часть роста дают ускоренные серверы и что инфраструктура энергосистем обычно требует больше времени на планирование и строительство, чем дата-центр. Это модельные прогнозы с вариантами чувствительности, а не гарантированный спрос.

Перенос рабочих нагрузок на другую площадку помогает только в том случае, если там в нужное время доступны электроэнергия, подключение к сети, охлаждение, волоконно-оптические маршруты и вычисления. Возобновляемая генерация нестабильна, а у заданий обучения, спроса на инференс и сетевой ёмкости свои графики. Распределение может снять нагрузку с одного перегруженного места, но может потребовать дублирования оборудования и дополнительных затрат энергии на транспорт.

Что показало бы реальный сдвиг

Доказательства должны связывать заявления с развёртываниями: названные мультиплощадочные рабочие нагрузки, измеренное время завершения заданий и хвостовые задержки, загрузка межплощадочных каналов, сходимость маршрутов, потери пакетов, стоимость завершённого задания, источник энергии и ограничения генерации, время подключения к сети, доступность сервиса и внедрение у клиентов. Рост мощности операторов соединений важен, но без данных о рабочих нагрузках он не может объяснить рост трафика именно ИИ.

Защитимым выводом является то, что связность стала частью полезной вычислительной ёмкости. Она не заменяет мегаватты, ускорители, хранилище или локальную фабрику. Обучение, инференс и репликация требуют разного размещения, и выигрышная архитектура будет зависеть от измеренной рабочей нагрузки и региональных ограничений, а не от универсального перехода от «масштаба» к «связности».