Angenommen ist noch nicht bewiesen: Wie NANOG technische

Summary

NANOG schließt Anbieter nicht aus, sondern schafft Voraussetzungen für prüfbare Beiträge: Folien werden veröffentlicht, Vertraulichkeitshinweise sind untersagt, Eigenwerbung und Logos werden begrenzt, Mehranbieter-Beispiele bevorzugt und Einreichungen durch Program Committee und Shepherds begleitet. Das ist eine vernünftige Eingangskontrolle, aber weder Peer Review noch eine Bestätigung technischer Aussagen.
Der auf NANOG 96 vorgestellte Geofeed-Vortrag legte Methoden und genaue Nenner offen. Gerade deshalb konnte Tom Beecher später öffentlich bestreiten, dass die Übereinstimmung zwischen Messpolygonen und Geofeeds bereits eine unabhängige Referenz für Richtigkeit darstelle. Seine Kritik ist keine bewiesene Widerlegung; die Antworten des im Listenarchiv als „Abdullah DevRel of IPinfo“ auftretenden Unternehmensvertreters sind umgekehrt keine unabhängige Validierung.
Ein begrenzter, mit dem Agendaeintrag verbundener Evidenznachtrag könnte Aussage, Folie, Methode, Nenner, Gegenargument, Antwort und dokumentierte Änderung zusammenführen. Er müsste weder Kundendaten und GPS-Spuren noch Gerätekennungen, proprietären Code oder private Korrespondenz offenlegen. So würde aus einem Vortragsarchiv ein nachvollziehbares Evidenzprotokoll.

Das zweite Leben einer Zahl

Auf Seite 21 der bei NANOG 96 gezeigten Präsentation steht als Überschrift ein großes Wort: Accuracy. Darunter findet sich jedoch eine präzisere, vorsichtigere Kennzahl: für die Länderebene 92.0% consistency. Diese kleine sprachliche Differenz ist der Ausgangspunkt für eine große Governance-Frage. „Accuracy“ klingt wie ein Urteil über Richtigkeit. „Consistency“ bezeichnet zunächst Übereinstimmung – in diesem Fall zwischen einer aus Laufzeitmessungen abgeleiteten räumlichen Eingrenzung und einer von Netzbetreibern veröffentlichten Ortsangabe. Beides kann eng zusammenhängen, ist aber nicht dasselbe.

Der Vortrag war zu diesem Zeitpunkt bereits durch den öffentlich beschriebenen NANOG-Prozess gegangen. Er war ausgewählt, in die Agenda aufgenommen und samt Folien und Video dauerhaft auffindbar gemacht worden. Damit war jedoch nur belegt, dass er als Konferenzbeitrag angenommen und veröffentlicht worden war. Daraus folgte weder, dass NANOG seine Ergebnisse institutionell übernommen hatte, noch, dass das Program Committee sie einem akademischen Peer Review unterzogen oder jemand die Befunde unabhängig reproduziert hatte.

Auswahl, Veröffentlichung, redaktionelle Begleitung, unabhängige Validierung und betriebliche Wahrheit sind verschiedene Zustände. Ein glaubwürdiges Fachforum sollte sie nicht allein durch ihre Nähe auf einer Agenda ineinander übergehen lassen.

Genau diese Trennung wurde nach der Tagung praktisch relevant. Eine zunächst anders betitelte Diskussion auf der NANOG-Mailingliste wechselte zu Geofeeds, Geolokalisierung, Messmethoden und den Folgen fehlerhafter Zuordnungen. Betreiber brachten Gegenbeispiele und Einwände vor; ein Vertreter des Unternehmens antwortete, räumte eine Grenze des beschriebenen Korrekturwegs ein und erklärte später, widersprüchliche Formulierungen auf einer Korrekturseite seien geändert worden. Die entscheidende Prüfung war damit nicht vor dem Applaus beendet. Sie wanderte vom Saal in ein offenes, allerdings schwer zu erschließendes Archiv.

Das ist kein Argument gegen Anbieter auf der Bühne. Im Gegenteil: Ohne Unternehmen, die Messinfrastruktur, große Datensätze und Ingenieurwissen finanzieren, blieben viele operative Probleme unsichtbar. Es ist ein Argument dafür, eine Präsentation auch nach ihrer Annahme als fortdauernden Evidenzgegenstand zu behandeln. Die relevante Einheit ist dann nicht pauschal „der Anbieter“ oder „der Vortrag“, sondern die einzelne Aussage mit ihrer Methode, ihrem Nenner, ihren Grenzen und ihrem weiteren Schicksal.

Was NANOG vor dem Auftritt bereits richtig macht

NANOGs veröffentlichte Regeln beginnen an der richtigen Stelle: Anbieter dürfen einreichen. Die Identität des Arbeitgebers ist kein Ausschlussgrund. Wer alltägliche Produktionsprobleme untersucht, arbeitet häufig gerade bei dem Unternehmen, das die Instrumente, Kundenkontakte oder Telemetrie besitzt. Ein pauschales Misstrauen gegenüber dieser Beschäftigungslage würde das Forum von einem erheblichen Teil seiner praktischen Kompetenz abschneiden.

Die Offenheit ist gleichwohl nicht grenzenlos. Nach den aktuellen Präsentationsrichtlinien wird eine PDF-Datei am Tag des Vortrags in der Veranstaltungsagenda veröffentlicht. Vertraulichkeitshinweise sind im Präsentationsmaterial nicht erlaubt. Vortragende sollen die Bühne nicht zur Werbung für ihren Arbeitgeber nutzen; Firmenlogos sind im Allgemeinen auf die erste und letzte Folie beschränkt. Konfigurationsbeispiele mit mehreren Anbietern werden ausdrücklich ermutigt. Ein Beispiel, das nur ein Produkt nutzt, wird nicht automatisch ausgeschlossen, erhält aber geringere Priorität.

Der Verhaltenskodex untersagt zudem aggressives Anpreisen von Produkten oder Dienstleistungen.

Auch der Auswahlweg ist mehr als ein einziges Ja oder Nein. NANOG beschreibt eine Abfolge aus Abstract, erster Prüfung durch das Program Committee, Zuweisung eines Shepherds, Entwurfsfolien, weiterer Folienprüfung, Auswahl, Agendaeintrag und endgültigen Folien. Einreichungen, denen bereits Folien beiliegen, werden nach der Prozessbeschreibung im Allgemeinen bevorzugt, weil sich die beabsichtigte Präsentation dadurch besser beurteilen lässt. Die Hinweise für Vortragende nennen operative Fallstudien, Anomalien, konkrete Expertise und eine Handlungsaufforderung an das Publikum als besonders nützliche Blickwinkel.

Das Program Committee erklärt, es verantworte die Programme der Treffen und seine Mitglieder würden Einreichungen anwerben und darüber abstimmen.

Diese Architektur begegnet zwei realen Gefahren. Erstens soll ein Verkaufsdeck nicht als technische Bildung maskiert werden. Zweitens soll eine interessante Idee vor ihrem öffentlichen Auftritt so weit entwickelt werden, dass Betreiber sie tatsächlich prüfen können. Die Regeln lösen damit mehr als ein bloßes Etiketteproblem. Öffentliche Folien, der Verzicht auf Geheimhaltungsklauseln und ein benannter Entwicklungspfad schaffen die Voraussetzung für spätere Anfechtung.

Sie lösen jedoch nicht automatisch das Erkenntnisproblem. Ein Logo-Limit sagt nichts darüber aus, ob ein Messmodell eine angemessene Näherung verwendet. Ein Shepherd kann die Darstellung schärfen, ohne Zugang zu Rohdaten zu haben. Ein Verbot aggressiver Werbung schützt die Atmosphäre des Raums, nicht die Gültigkeit einer statistischen Schlussfolgerung. Selbst die Veröffentlichung der Folien ist erst ein Anfang: Sie konserviert, was gesagt wurde, aber nicht zwingend, was später daran bestritten oder geändert wurde.

Auch die institutionelle Sprache verlangt Sorgfalt. Auf der Seite des Program Committee wird als strategisches Ziel von für Sponsoren und Vortragende wechselseitig lohnenden Vereinbarungen gesprochen. Das wirft eine berechtigte Grenzfrage auf: Wie bleibt ein Programm nützlich für Organisationen, die Expertise und Ressourcen einbringen, ohne dass Nutzen als Bevorzugung missverstanden wird? Die Formulierung beweist für den konkreten NANOG-96-Vortrag keinerlei Einfluss. Wer daraus eine gekaufte Auswahl ableitete, würde aus einem allgemeinen Ziel eine unbelegte Absicht konstruieren.

Die richtige Reaktion ist kein Verdacht als Ersatz für Belege, sondern ein besser lesbarer Evidenzpfad.

Eine alte Auseinandersetzung, kein neuer Kulturkampf

Die Spannung zwischen betrieblichem Wert und kommerziellem Interesse begleitet NANOG seit Langem. In einer Diskussion von 2008 kritisierte ein Teilnehmer vertrauliche oder proprietäre „Black-Box“-Inhalte, fehlende Alternativen und unzureichende methodische Details. Andere Stimmen verteidigten Anbieterarbeit, die auf realen Experimenten und Betriebserfahrung beruhte. Sie wiesen darauf hin, dass eine genaue Methode selbst wirtschaftlich wertvoll sein könne und dass auch die Fragerunde auf der Bühne eine Form der Prüfung darstelle. Die historische Debatte ist keine aktuelle Regel und kein Urteil über heutige Einreichungen.

Sie zeigt aber, dass die einfache Formel „Anbieter gleich Marketing“ schon damals zu grob war.

Eine Ausschreibung für NANOG 68 aus dem Jahr 2016 formulierte die Balance ähnlich: Anbieter waren willkommen, während werbliche Vorträge und Darstellungen proprietärer Lösungen unerwünscht waren. Die Linie lautet also nicht Reinheit durch Ausschluss, sondern Nützlichkeit unter Bedingungen. Darin liegt eine wichtige redaktionelle Einsicht. Interessen können offengelegt und Methoden geprüft werden; besondere Kenntnisse lassen sich nicht durch institutionelle Neutralität herbeizaubern.

Der härteste Test für einen Anbietervortrag darf deshalb nicht die Visitenkarte des Vortragenden sein. Er muss fragen: Ist das Problem so beschrieben, dass andere seine Konturen nachvollziehen können? Sind die entscheidenden Nenner sichtbar? Werden Abhängigkeiten von einem Produkt oder privaten Datensatz benannt? Sind Fehlermodi und alternative Erklärungen erkennbar? Gibt es einen Weg, Gegenbeispiele einzureichen und später zu erfahren, ob ein Artefakt, eine Aussage oder ein Prozess geändert wurde? Ein guter Beitrag kann all diese Fragen beantworten, obwohl der Arbeitgeber von seiner Verbreitung profitiert.

Ein schlechter Beitrag kann sie verfehlen, obwohl er keine einzige Preisfolie enthält.

Der Fall NANOG 96: zwei Prüfwege für Geofeeds

NANOG 96 nahm den Beitrag „IP Geofeeds: Trust, Accuracy, and Abuse“ an. In der Agenda wird Calvin Ardi von IPinfo als Vortragender geführt; die veröffentlichten Folien nennen zusätzlich Oliver Gasser und William Leung als Autoren. Die Präsentation untersuchte Geofeeds, also von Netzbetreibern veröffentlichte Ortsangaben zu IP-Präfixen, und stellte zwei Prüfungsansätze vor: aktive Messungen der Round-Trip Time aus einem Netz von Messsonden und eine Validierung mithilfe GPS-fähiger Mobilgeräte.

Der aktive Ansatz ist in den Folien konkreter beschrieben, als es eine bloße Produktbehauptung wäre. Laufzeitmessungen werden genutzt, um Entfernungsgrenzen und daraus Polygone abzuleiten. Anschließend wird geprüft, wie diese Polygone mit dem im Geofeed angegebenen Ort zusammenpassen. Für diesen Teil nennt das Deck 27.7M RTT-Messungen, 205.0k IPv4-Präfixe und 74.5k IPv6-Präfixe. Das zugrunde liegende Messsondennetz wird mit mehr als 1.300 Messsonden in über 500 Städten, 143 Ländern und mehr als 400 autonomen Systemen beschrieben.

Diese Nenner sind nicht dekorativ. Sie zeigen, auf welcher Größenordnung der veröffentlichte Anspruch beruht, und erlauben es Lesern, verschiedene Arten von Abdeckung auseinanderzuhalten. Viele Messpunkte können eine breite Beobachtung liefern, ohne dass jeder mögliche Pfad, jede Region oder jede Netzstruktur gleich gut vertreten ist. Eine große Präfixzahl beantwortet nicht von selbst die Frage, ob die angenommene Geometrie zwischen Messsonde und Ziel die physische Route angemessen abbildet. Gerade weil die Folien die Größen nennen, kann die Diskussion über diese Grenzen auf mehr beruhen als auf Vertrauen.

Auf der Seite mit der Überschrift Accuracy werden die Ergebnisse weiter aufgeschlüsselt. Für Länder nennt sie 92.0% consistency, bestehend aus 96.6% IPv4 und 79.6% IPv6. Für Städte nennt sie 79.6% consistency, mit 88.3% IPv4 und 56.2% IPv6. Außerdem wird eine mediane Abweichungsdistanz von 759 km angegeben. Das sind die genauen veröffentlichten Werte. Sie sollten weder unterschlagen noch sprachlich auf „92 Prozent korrekt“ verkürzt werden. Der Befund ist nach der Beschriftung der Zahl Konsistenz; die Folienüberschrift verwendet Accuracy. Diese innere Spannung gehört zum Beweisstück selbst.

Der zweite Ansatz sollte einen anderen Bezug zur tatsächlichen Position herstellen. Die Präsentation beschreibt 169 GPS-fähige Geräte in 24 Ländern und 196 Städten. Erfasst wurden 135 IPv4- und 97 IPv6-Präfixe. Für diesen mobilen Vergleich werden auf Länderebene 84.5% consistency und auf Stadtebene 29.9% consistency berichtet. Die Stichprobe ist wesentlich kleiner und anders aufgebaut als der aktive Messbestand. Sie darf deshalb weder als bloße Wiederholung noch als vollständige Bestätigung der ersten Methode behandelt werden. Ihr Wert liegt gerade darin, einen zweiten Bezugspunkt mit eigenen Einschränkungen sichtbar zu machen.

Am Ende schlagen die Autoren ein aktualisiertes Format sowie Mechanismen zur Validierung und Rückmeldung an Betreiber vor. Das ist relevant, weil die Präsentation die Gestaltung von Format, Prüfung und Feedback damit selbst als noch offene Arbeitsfläche behandelt. Ein Vorschlag auf Folien ist allerdings keine implementierte Funktion. Er beweist weder, dass ein Mechanismus später gebaut wurde, noch, dass ein bestimmter Korrekturfall ihn erfolgreich durchlief.

Übereinstimmung ist noch keine unabhängige Referenz

Die öffentliche Nachprüfung gewann an Schärfe, als Tom Beecher die Interpretation der aktiven Messung angriff. Seine Kritik lautete im Kern, die Untersuchung zeige Übereinstimmung zwischen durch das Messsondennetz abgeleiteten Polygonen und veröffentlichten Geofeeds, nicht unabhängig festgestellte Richtigkeit. Er bezweifelte zudem die Annahme, aus geradliniger Entfernung und Signalausbreitung eine belastbare räumliche Grenze für terrestrische Glasfasernetze abzuleiten.

Reale Pfade folgten nicht notwendig einer Großkreisroute; zwei Endpunkte könnten geografisch nahe liegen und wegen der Kopplungsstruktur ihrer Netze dennoch hohe Laufzeiten aufweisen. Aus seiner Sicht dürfe die Zahl 92 Prozent deshalb nicht als Genauigkeitsbeweis gelesen werden. Außerdem verwies er auf Grenzen der Abdeckung.

Das ist eine substanzielle methodische Kritik, aber noch keine Widerlegung. Das für diesen Artikel geprüfte öffentliche Material enthält keine unabhängige Replikation, die Beechers Einwand endgültig bestätigt oder verwirft. Ebenso wenig kann man aus der Entschiedenheit einer Mailinglistenantwort schließen, dass das Modell unbrauchbar sei. Operative Debatten sind wertvoll, weil Beteiligte Annahmen mit eigenen Erfahrungen konfrontieren; sie ersetzen keinen unabhängigen Benchmark.

Der im Listenarchiv als „Abdullah DevRel of IPinfo“ bezeichnete Unternehmensvertreter hatte Leser zuvor auf die NANOG-96-Präsentation und auf eine getrennte wissenschaftliche Veröffentlichung verwiesen, die er als peer-reviewed bezeichnete. Er erklärte außerdem, ein unabhängiger akademischer Benchmark sei willkommen. Die Trennung ist wichtig: Der verlinkte Forschungsaufsatz kann begutachtet worden sein; dieser Status überträgt sich nicht rückwirkend auf den Konferenzvortrag. Auch der Wunsch nach einem Benchmark ist eine angemessene Antwort auf ein Evidenzdefizit, aber noch nicht dessen Behebung.

RFC 8805 hilft, eine weitere Verwechslung zu vermeiden. Der Standard definiert ein Format, in dem geografische Angaben zu IP-Präfixen selbst veröffentlicht werden können. Formkonformität schafft Interoperabilität; sie macht den Inhalt nicht automatisch wahr. Ein syntaktisch gültiger Eintrag kann veraltet, zu grob, absichtlich irreführend oder für einen bestimmten Anwendungsfall missverständlich sein. Umgekehrt beweist eine Abweichung zwischen Messmodell und Geofeed noch nicht, welche Seite falsch ist.

Das ist die zentrale erkenntnistheoretische Schwierigkeit des Falls: Mehrere Signale können einander prüfen, ohne dass eines von ihnen immer als unabhängige Referenz dienen kann.

Auch Geoff Hustons unabhängige Besprechung von NANOG 96 bei APNIC ordnete IP-basierte Geolokalisierung als grob, manipulierbar und häufig schwer überprüfbar ein und erwähnte beide Geofeed-Sitzungen der Veranstaltung. Diese Außensicht erweitert den Problemrahmen, ist jedoch ebenfalls kein Benchmark der vollständigen IPinfo-Produktionsdatenbank. Sie hilft zu erklären, warum die Frage wichtig ist; sie entscheidet den konkreten Methodenstreit nicht.

Ein großer Thread, aber kein sauberer Nenner

Der offizielle NANOG-Threadcontainer weist 122 Kommentare und 44 Teilnehmer aus. Diese Zahl ist verführerisch, weil sie nach einer großen, klar umrissenen Debatte klingt. Tatsächlich begann der Thread mit BGP-Communities und wechselte später die Betreffzeilen. Nicht jede Nachricht und nicht jede Person befasste sich mit Geofeeds oder mit der NANOG-96-Präsentation. Wer alle 122 Kommentare zu einem Referendum über den Vortrag erklärte, würde genau den Nennerfehler wiederholen, den dieser Artikel untersucht.

Eine vollständige Erfassung der paginierten Antworten ergibt eine engere redaktionelle Zählung: 107 Antworten tragen einen Betreff mit „geofeed“ oder „geofeeds“; sie stammen von 35 unterschiedlichen angezeigten Namen. Auch das ist keine offizielle NANOG-Statistik. Es ist eine Klassifikation nach Betreffzeichenketten, keine Inhaltsanalyse jeder Aussage. Sie misst weder Zustimmung noch Ablehnung und schon gar keinen Konsens der gesamten NANOG-Gemeinschaft.

Trotzdem zeigt die Größenordnung, dass der Vortrag nach dem Termin eine zweite, operative Öffentlichkeit bekam. Beteiligte diskutierten nicht nur abstrakte Messgeometrie, sondern auch Korrekturanreize, die Sichtbarkeit eines Datenanbieters für betroffene Endnutzer und Netzbetreiber sowie konkrete Konflikte zwischen veröffentlichten Geofeeds und internen Ergebnissen. Genau hier erfüllt eine offene Liste eine Funktion, die die Bühne allein nicht leisten kann. Sie lässt Kritik über den engen Zeitplan der Konferenz hinaus weiterlaufen, nimmt Gegenbeispiele aus dem Betrieb auf und zwingt Behauptungen, auf andere Erfahrungswelten zu reagieren.

Ihre Form ist jedoch schlecht auf dauerhafte Nachvollziehbarkeit ausgerichtet. Ein späterer Leser muss wissen, dass ein zunächst fremder Thread seinen Gegenstand gewechselt hat. Er muss zwischen Zitaten und neuen Aussagen unterscheiden, Wiederholungen aussortieren und selbst rekonstruieren, welche Antwort sich auf welche Folie bezieht. Eine lange Diskussion kann große Erkenntnisdichte besitzen und zugleich schwer auffindbar sein. Offenheit ist nicht dasselbe wie Erschließbarkeit.

Im geprüften Agendaeintrag sind Sitzung, Video und Folien verlinkt. Ein sichtbarer Verweis auf den späteren Geofeed-Zweig, auf Beechers benannte Kritik, auf die eingeräumte Grenze des Korrekturprozesses oder auf die behauptete Änderung am Formular wurde dort nicht gefunden. Das beweist nicht, dass NANOG Kritik verberge oder intern keinen weiteren Prozess habe. Es beschreibt nur den geprüften öffentlichen Bestand zu einem bestimmten Zeitpunkt. Der Evidenzpfad ist vorhanden, aber auf verschiedene Archive verteilt.

Was die Antworten klären – und was nicht

Die Reaktionen des unter „Abdullah DevRel of IPinfo“ schreibenden Unternehmensvertreters sind besonders nützlich, weil sie verschiedene Evidenzarten sichtbar machen. Er schrieb, Konflikte, die ein Internetanbieter melde, würden untersucht; systematische Probleme über mehrere Präfixe hinweg könnten eine Kontaktaufnahme auslösen. Zugleich erklärte er, das Unternehmen kontaktiere nicht jeden ASN wegen jeder einzelnen Präfixabweichung, wenn keine Beschwerde vorliege. Er nannte diese Begrenzung real und schlug einen freiwilligen Bericht über Konflikte mit hoher Konfidenz vor.

Das ist mehr als eine allgemeine Verteidigung. Es ist ein öffentliches Eingeständnis einer Grenze des beschriebenen Rückkopplungskreises und ein konkreter Verbesserungsvorschlag. Dennoch bleibt es die Darstellung eines Unternehmensvertreters. Aus dem Archiv geht nicht unabhängig hervor, wie das Produktionssystem in jedem Fall arbeitet oder ob der vorgeschlagene Bericht später umgesetzt wurde.

In einer weiteren Nachricht erklärte der Vertreter, er habe bei einem Betreiber widersprüchliche interne Ergebnisse erkannt, bei denen die aktive Messung gegenüber dessen Geofeed bevorzugt worden sei. Er bat darum, die Ergebnisse privat zu teilen. Vertraulichkeit kann hier vollkommen legitim sein: Detaillierte Netz-, Kunden- oder Missbrauchsinformationen gehören nicht automatisch auf eine öffentliche Liste. Für das Evidenzprotokoll entsteht aber eine klare Grenze. Der öffentliche Teil zeigt, dass ein Konflikt erkannt wurde; sein Ausgang bleibt unbekannt. Niemand darf aus der Bitte um privaten Austausch eine bestätigte Datenkorrektur ableiten.

Später wies ein Teilnehmer auf Formulierungen im Korrekturformular hin. Der IPinfo-Vertreter erklärte daraufhin, der Text widerspreche den Aussagen im Thread, übernahm dafür Verantwortung und sagte, das Formular sei so aktualisiert worden, dass es eine Untersuchung mehrerer Quellen statt eines automatischen Vorrangs einer Quelle beschreibe. Das ist eine öffentlich behauptete Korrektur an der Darstellung des Verfahrens. Die frühere Formularversion wurde in der hier geprüften Evidenz nicht rekonstruiert; ebenso wenig wurde die Ausrollung in allen Produktionsoberflächen unabhängig belegt.

Während der Recherche war ein öffentliches Korrekturformular erreichbar. Seine Existenz ist nützlich, aber keine Leistungskennzahl. Sie sagt nichts über Antwortzeiten, Annahmequoten, Ablehnungsgründe, Datenänderungen oder die Dauer bis zur Wirkung bei nachgelagerten Kunden. Ein Eingabefeld ist ein Zugang zu einem Prozess, kein Nachweis seines Ergebnisses.

Zusammen ergeben diese Antworten weder Freispruch noch Schuldspruch. Sie zeigen vielmehr eine Staffelung: Verteidigung eines Ansatzes, Anerkennung eines echten Limits, Vorschlag einer Verbesserung, Identifikation eines konkreten Widerspruchs, Verlagerung eines Falls in privaten Austausch und Behauptung einer Textänderung. Ein sorgfältiges Archiv sollte diese Kategorien nicht unter dem pauschalen Etikett „Antwort des Anbieters“ zusammenfassen.

Der stärkste Einwand gegen mehr Offenlegung

Eine Forderung nach vollständiger Reproduzierbarkeit klingt sauber, kann in einem Betreiberforum aber unvernünftig sein. Anbieter verfügen häufig über Datensätze, Messpunkte und Produktionsbeobachtungen, die Außenstehenden gerade deshalb fehlen, weil sie aus Kundenbeziehungen oder aufwendig aufgebauter Infrastruktur stammen. Eine Publikationspflicht für sämtliche Rohdaten könnte Kundengeheimnisse verletzen, einzelne Geräte oder Nutzer lokalisierbar machen und Angreifern Einblick in Mess- oder Abwehrsysteme geben.

Die Freigabe proprietären Codes könnte einen legitimen Wettbewerbsvorteil zerstören, ohne die entscheidende wissenschaftliche Frage überhaupt zu klären.

Auch die Institution hat eine Grenze. NANOG ist keine Fachzeitschrift mit bezahlten Gutachtern, formellen Replikationsanforderungen und einem über Jahre arbeitenden Korrekturapparat. Sein Nutzen liegt gerade in schneller, praxisnaher Weitergabe. Wird jede Präsentation mit den Pflichten einer akademischen Publikation belastet, dürften einige der Ingenieure fernbleiben, deren Arbeit die Gemeinschaft am dringendsten braucht. Ein offener Saal und eine offene Liste schaffen bereits eine ungewöhnlich direkte Möglichkeit zur Korrektur.

Dieser Einwand ist stark, weil er nicht bloß Bequemlichkeit verteidigt. Er schützt Privatsphäre, Sicherheit, Wettbewerb und die Geschwindigkeit operativer Erkenntnis. Eine Governance-Empfehlung, die diese Werte ignoriert, würde das Forum ärmer machen und könnte Betroffene gefährden.

Aber aus der Unmöglichkeit vollständiger Offenlegung folgt nicht, dass nur zwei Optionen existieren: alles publizieren oder nach dem Vortrag nichts mehr ordnen. Zwischen Rohdatendump und Marketingbehauptung liegt ein breiter Bereich proportionaler Rechenschaft. Man kann die Klasse einer Methode beschreiben, genaue Nenner nennen, Abdeckungsgrenzen markieren, Interessen offenlegen, alternative Erklärungen dokumentieren und den Status einer Korrektur festhalten, ohne einen einzigen Kundendatensatz freizugeben.

Der Maßstab sollte daher nicht „vollständig offen“ lauten, sondern „so weit öffentlich, dass eine bestimmte Aussage richtig eingeordnet und ihr weiterer Verlauf verfolgt werden kann“. Was aus gutem Grund privat bleibt, muss nicht selbst veröffentlicht werden. Es genügt oft, die Art der Beschränkung zu benennen: etwa „Betreiberbeispiel privat geprüft; öffentliches Ergebnis nicht verfügbar“ oder „Rohdaten enthalten Gerätepositionen und werden nicht geteilt“. Eine klar deklarierte Grenze ist erkenntnisreicher als eine stillschweigende Lücke.

Ein kleiner Nachtrag mit großer Wirkung

NANOG braucht dafür kein neues Begutachtungssystem und kein Urteil über den Produktsieger. Ein begrenzter, dauerhafter Nachtrag am Agendaeintrag würde ausreichen. Er könnte immer dann entstehen, wenn nach einer Sitzung ein substanzieller öffentlicher Einwand, eine Antwort oder eine Korrektur zu einer konkreten technischen Aussage vorliegt. Sein Gegenstand wäre nicht die gesamte Diskussion, sondern eine nachvollziehbare Behauptungskette.

Der erste Eintrag müsste die Aussage genau benennen: etwa die Folienüberschrift Accuracy und den darunterstehenden Wert 92.0% consistency. Der zweite müsste auf Folie oder Seite verweisen und Methode sowie Nenner zusammenfassen: RTT-Polygone, Präfixzahlen, Abdeckung der Messsonden oder mobile GPS-Stichprobe. Der dritte müsste die Kritik als Kritik erfassen, einschließlich ihres Urhebers und der alternativen Erklärung – hier beispielsweise Tom Beechers Einwand, Übereinstimmung sei keine unabhängige Referenz und reale Netzpfade könnten die angenommene Geometrie verletzen.

Danach müsste der Nachtrag die Art der Reaktion unterscheiden. Eine Antwort verteidigt eine Methode. Eine Einräumung erkennt eine Begrenzung an. Eine angekündigte Verbesserung beschreibt eine Absicht. Eine Korrektur verändert ein öffentliches Artefakt. Eine private Weiterverfolgung lässt den öffentlichen Ausgang offen. Diese Begriffe sind keine Wertnoten; sie verhindern, dass ein Leser aus „es gab eine Reaktion“ mehr ableitet, als belegt ist.

Schließlich braucht jeder Eintrag einen Versionsstand. Wurde eine Folie, ein Formular, eine begleitende Erklärung oder ein Datensatz verändert? Wer behauptet die Änderung, und wurde sie unabhängig beobachtet? Ist das Ergebnis offen, abgeschlossen oder privat? Im vorliegenden Fall könnte der Nachtrag festhalten, dass der IPinfo-Vertreter eine widersprüchliche Formularformulierung einräumte und von einer Aktualisierung berichtete, während frühere Fassung und flächendeckende Ausrollung anhand der öffentlichen Evidenz nicht rekonstruiert werden konnten. Diese Formulierung bewahrt sowohl die Korrekturbehauptung als auch ihre Grenze.

Ein solcher Nachtrag sollte streng auf öffentlich belegte, sachlich relevante Punkte begrenzt sein. Er wäre kein Protokoll der Kommentarmoderation, keine Rangliste der lautesten Teilnehmer und kein Mechanismus, mit dem jede Meinungsverschiedenheit an die Agenda geheftet wird. Die Schwelle könnte verlangen, dass der Einwand eine bezeichnete Aussage, Methode, Zahl oder Betriebsfolge betrifft und dass eine dauerhaft erreichbare Quelle existiert. Das Program Committee müsste nicht entscheiden, welche Seite technisch „gewonnen“ hat. Es müsste lediglich die Evidenzkette auffindbar machen.

Ebenso wichtig ist die Negativliste. Ein öffentlicher Nachtrag darf keine Kundendaten, GPS-Spuren, Gerätekennungen, proprietären Quellcode, private Betreiberkorrespondenz oder missbrauchsrelevante Infrastrukturdetails erzwingen. Wenn eine Antwort nur privat möglich ist, wird dieser Status veröffentlicht, nicht der geschützte Inhalt. Damit bleibt die Prüfung proportional: genug Kontext, um den Wissensstand zu verstehen; nicht so viel, dass die Dokumentation selbst Schaden anrichtet.

Technisch wäre das bescheiden. Neben Video und Folien stünde ein Feld „Spätere Evidenz und Korrekturen“. Darin könnten wenige strukturierte Zeilen Aussage, Quelle, Reaktion, Status und zuletzt geprüfte Artefaktversion verbinden. Für den NANOG-96-Fall würde dies die Mailinglistendiskussion nicht ersetzen. Es würde Leser gezielt dorthin führen und ihnen erklären, welche Teile für welche Folienaussage relevant sind.

Warum dies Governance und nicht bloß Redaktion ist

Ein dauerhafter Link verändert nicht die Wahrheit eines Messmodells. Er verändert, wer die Kosten der Überprüfung trägt. Heute trägt sie vor allem der spätere Leser: Er muss Agenda, Folien, einen anders begonnenen Thread, Einzelmeldungen und Korrekturportal selbst zusammensuchen. Der Vortragende profitiert dagegen von einer sauberen, dauerhaften Konferenzseite. Ein Nachtrag verteilt diese Last etwas gerechter, ohne den Vortragenden zu verurteilen.

Er schützt auch NANOG vor einer unbeabsichtigten Bedeutungsverschiebung. Ein archivierter Vortrag wirkt mit jedem Jahr offizieller, während der soziale Kontext seines Auftritts verblasst. Wer nur die Agenda findet, kann Auswahl mit Bestätigung verwechseln. Wer nur den Streit findet, kann Kritik mit Widerlegung verwechseln. Eine verknüpfte Akte hält beide Fehlinterpretationen in Schach: Das Program Committee hat den Beitrag ausgewählt; Betreiber haben seine Methode später angegriffen; der Anbieter hat geantwortet; manche Punkte blieben offen; eine Änderung wurde behauptet. Keine dieser Tatsachen muss die andere verschlucken.

Die Maßnahme würde zudem die richtigen Anreize setzen. Anbieter müssten nicht befürchten, dass Beschäftigung bei einem kommerziellen Unternehmen schon als Makel gilt. Stattdessen wüssten sie, dass präzise Aussagen, sichtbare Nenner und gute Korrekturwege ihren Beitrag auch unter Kritik stärken. Kritiker erhielten keinen institutionellen Stempel für jede Behauptung, wohl aber eine auffindbare Verbindung, wenn sie einen konkreten methodischen Punkt öffentlich belegen. NANOG bliebe Forum, nicht Gericht.

Offen bleibt, was das öffentliche Material nicht zeigt: die internen Gründe des Program Committee für die Annahme des Vortrags; Fragen, die bei der Prüfung zu unabhängiger Referenz, Geometrie, Abdeckung oder Wortwahl gestellt wurden; Änderungen zwischen Entwurf und endgültigen Folien; die unabhängige Reproduktion der Methoden; die genaue Beziehung zwischen Präsentation und getrenntem Forschungsaufsatz; die Ausrollung der behaupteten Formularänderung; Volumen und Geschwindigkeit realer Korrekturen; die Umsetzung des vorgeschlagenen Konfliktberichts; und das Ergebnis privater Betreiberfälle.

Diese Unbekannten sind kein Freibrief für Vermutungen. Sie markieren die Grenze dessen, was ein öffentlicher Evidenznachtrag ehrlich sagen kann.

Vom Vortragsarchiv zum Evidenzprotokoll

Der NANOG-96-Fall liefert keinen einfachen Sieger. Die Folien sind ungewöhnlich konkret: Methoden und Nenner lassen sich prüfen. Tom Beecher formulierte einen gewichtigen Einwand gegen die Gleichsetzung von Messübereinstimmung und unabhängiger Referenz. Der IPinfo-Vertreter verwies auf weitere Forschung, begrüßte einen unabhängigen Benchmark, verteidigte betriebliche Abläufe, räumte eine Kontaktgrenze ein und erklärte eine Formularformulierung für geändert. Der öffentliche Bestand validiert weder pauschal das Produkt noch widerlegt er es.

Gerade diese Unentschiedenheit macht den Fall wertvoll. Ein Betreiberforum beweist seine Integrität nicht dadurch, dass nur unanfechtbare Aussagen auf die Bühne gelangen. Das wäre bei aktueller Betriebstechnik eine unrealistische Erwartung. Integrität zeigt sich vielmehr darin, ob anfechtbare Aussagen so publiziert werden, dass qualifizierte Einwände sichtbar werden, Antworten nicht mit Bestätigung verwechselt werden und spätere Änderungen zum ursprünglichen Anspruch zurückführen.

NANOG besitzt bereits fast alle Bauteile: Auswahlregeln, Shepherding, veröffentlichte Folien, begrenzte Werbung, eine offene Mailingliste und Betreiber, die bereit sind, Zahlen mit Erfahrung zu konfrontieren. Was im geprüften öffentlichen Bestand fehlt, ist die schmale Brücke zwischen ihnen. Ein auf einzelne Aussagen bezogener Agenda-Nachtrag könnte sie bauen, ohne ein Journal zu imitieren, Geschäftsgeheimnisse zu enteignen oder private Daten preiszugeben.

Ein Vortragsarchiv bewahrt, was auf der Bühne gesagt wurde. Ein Evidenzprotokoll bewahrt zusätzlich, wie diese Aussage geprüft, begrenzt, beantwortet und gegebenenfalls geändert wurde. Zwischen beiden liegt kein Urteil über den besseren Geolokalisierungsanbieter. Es liegt die Fähigkeit einer technischen Gemeinschaft, ihren eigenen Wissensstand auch nach dem Applaus noch lesen zu können.

Angenommen ist noch nicht bewiesen: Wie NANOG technische Anbieterbeiträge nach dem Vortrag prüfbar halten kann