Expanse: Der Antrag ist bewilligt. Wann kann die Forschung loslegen?

Zusammenfassung

• Für Expanse gibt es veröffentlichte Benchmarks und Vergaberegeln. Spitzenleistung, bewilligtes Kontingent und Laufzeit einer Anwendung sind trotzdem drei verschiedene Größen.
• Die H100-Ressourcen sind in Expanse eingebunden, werden aber über NAIRR vergeben. Für Voyager dokumentiert der Jahresbericht den Beginn einer breiteren Vergabephase am 1. Juni 2025.

Ein bewilligtes Rechenprojekt kann zunächst ohne nutzbaren Rechner dastehen. Das ist keine erfundene Panne: Die ACCESS-Einstiegshilfe erklärt ausdrücklich, warum bei einem neuen Credit-Projekt noch keine aktive Ressource angezeigt werden kann. Das Team hat Credits erhalten. Es muss sie erst gegen Zeit auf einer geeigneten Ressource tauschen, und der Anbieter muss zustimmen.

Für eine Gruppe, die ihren nächsten Versuch terminieren will, macht das einen Unterschied. ACCESS empfiehlt, bis zu eine Woche für diese Zustimmung einzuplanen. Wie lange der Rechenjob danach auf seinen Start wartet, sagt die Empfehlung nicht. Wer die Zusage schon als Beginn des Experiments verbucht, überspringt einen Schritt.

So lässt sich Expanse besser verstehen als allein über seine 5,16 Petaflops Spitzenleistung. Das San Diego Supercomputer Center, kurz SDSC, betreibt die Anlage an der UC San Diego. Die Maschine ist schnell. Ob ein Team seinen Termin hält, hängt aber davon ab, welchen Teil es tatsächlich nutzen darf und wie sein Programm darauf läuft.

Der Test ist vorhanden — nur nicht für jede Frage

Die TOP500-Seite von Expanse weist für die dort beschriebene Dell/AMD-Konfiguration 2,48 Petaflops im Linpack-Test und 3,30 Petaflops theoretische Spitze aus. Das ist eine veröffentlichte Messung, kein fehlendes Beweisstück. Sie beantwortet aber nicht jede Frage zur heutigen Anlage. Wer 2,48 durch die 5,16 aus dem Handbuch teilt, erhält keine belastbare Auslastungsquote: Hardwareumfang und Testbezug sind nicht gleichgesetzt.

Anschaulicher für die Planung ist eine andere Zahlenspanne. In einem Beitrag der Betreiber von 2021 liegen die CPU-Anwendungstests, je Kern gerechnet, zwischen dem 0,97- und dem 1,9-Fachen des Vorgängers Comet. Ein getesteter Fall war damit etwas langsamer, ein anderer erheblich schneller. Welches Programm läuft, ist keine Fußnote zum Leistungswert, sondern Teil der Antwort.

Diese historischen Tests der Betreiber sind weder eine unabhängige Nachmessung noch eine Prognose für heutiges KI-Training auf H100. Sie geben einem Team aber einen guten Grund, die eigene Anwendung auszuprobieren, bevor es sich auf einen Geschwindigkeitsgewinn verlässt.

Im Expanse-Handbuch stehen 728 AMD-Standardknoten und in der technischen Tabelle 52 V100-Knoten; die Einleitung nennt dagegen 54 GPU-Knoten. Diese Unstimmigkeit bleibt bestehen. Eine genaue aktuelle Bestandszahl lässt sich daraus nicht einfach auswählen.

Hinzu kommen 34 Dell-XE9640-Server mit jeweils vier H100, zusammen 136 H100. Sie nutzen die Expanse-Infrastruktur mit, sind also keine losgelöste Anlage. Ihre Rechenzeit in Partitionen wie nairr-gpu wird dennoch über das NAIRR Pilot vergeben. Für das Team heißt das: Eine gemeinsame Anmeldung ist noch keine gemeinsame Nutzungserlaubnis.

Ein Höchstwert ist noch kein Guthaben

Für einen verantwortlichen Projektleiter nennt das Expanse-Handbuch maximal 15 Millionen Kernstunden und 75.000 GPU-Stunden. Science Gateways dürfen im Verfahren Maximize bis zu 30 Millionen Kernstunden beantragen. Keine dieser Grenzen besagt, dass ein bestimmtes Projekt die volle Menge erhält.

Der Weg dorthin ist öffentlich beschrieben. Vom ACCESS-Portal führen die Vergaberegeln zu unterschiedlichen Verfahren: Explore, Discover und Accelerate vergeben Credits, die für konkrete Ressourcen eingetauscht werden. Große Maximize-Anträge werden halbjährlich begutachtet. Erst nach der wissenschaftlichen Bewertung wird eine gegebenenfalls nötige Kürzung bei Übernachfrage vorgenommen.

Die hohen Obergrenzen können bei der Planung verführen. Doch ein Team, das mit dem Maximum rechnet, bevor es die Bewilligung kennt, reserviert im eigenen Kalender etwas, das ihm noch gar nicht gehört. Eine kleinere Zusage würde dann nicht nur die Rechnung ändern, sondern möglicherweise auch den Umfang des Versuchs.

Kernstunden und GPU-Stunden lassen sich deshalb weder physikalisch gleichsetzen noch als ein beliebiges Stundenkonto behandeln. Umgekehrt wäre es falsch, den vorhandenen Credit-Tausch zu übersehen. Entscheidend sind die tatsächlich genehmigte Ressource und deren Bedingungen, nicht nur die Einheit in einer Überschrift.

Auch der Förderzweck passt dazu. Hinter dem ursprünglichen NSF-Förderlink 1928224 steht ein öffentlicher Datensatz, der Expanse als Infrastruktur für vielfältige Forschung mit eher überschaubarem Rechenbedarf beschreibt. Viele Projekte sollen sinnvolle Anteile nutzen können. Eine eindrucksvolle Gesamtleistung allein sagt noch nicht, ob das bei einem konkreten Vorhaben gelingt.

Bei Voyager entscheidet das Datum mit

Für Voyager, ein weiteres KI-System des SDSC, erzählt das Handbuch noch von einer dreijährigen Testphase ab Anfang 2022, ausgewählten Projekten und Kubernetes. Es nennt 42 Trainingsknoten mit 336 Gaudi-Prozessoren sowie zwei Inferenzknoten mit 16 Inferenzprozessoren der ersten Generation.

Der Jahresbericht 2024–2025, Seite 16, ist beim Zugang weiter: Am 1. Juni 2025 begann demnach die zweijährige Phase breiterer Ressourcenvergabe; Anträge laufen über ACCESS. Zudem nennt der Bericht Gaudi1 und Gaudi2. Die ältere Aufstellung taugt daher nicht ohne Weiteres als vollständiger aktueller Gerätebestand.

Wer beim alten Handbuch aufhört, könnte somit eine inzwischen dokumentierte Zugangsmöglichkeit übersehen. Der Jahresbericht verspricht keinen freien Platz, zeigt aber, wo sich ein Antrag lohnt zu prüfen. Danach bleiben die beiden Fragen, die das Team wirklich weiterbringen: Welche Zeit wurde uns bewilligt? Und was schafft unser Programm darin? Erst ihre Antworten machen aus einer schnellen Maschine einen haltbaren Termin.

Quellenhinweis: Der bisher verlinkte TOP500-Eintrag 179831 beschreibt ein Inspur-System, nicht Expanse. Er darf nicht als Leistungsnachweis für SDSC dienen. Die Quellen wurden am 19. Oktober 2026 geprüft; aktuelle Jobwartezeiten und einzelne Bewilligungen wurden nicht getestet.