Summary

  • Robert Kisteleki는 2023년 RIPE Atlas와 RIS의 기록을 재정적으로 감당 가능한 만큼 최대한 보존하되, 오래되거나 드물게 조회하는 결과는 더 느린 접근 단계에 둘 수 있다고 제안했다.
  • 수집 결과의 접근성을 유지하면서 서비스와 자료 연령에 따라 경로와 목표 시간을 달리하고, 인증 요청을 장려하며, 비공개 Atlas 측정의 소유자에게 최소 한 달의 결과 인출 기간을 주는 구상이었다.

오래된 기록에도 계산서가 붙는다

네트워크 측정에는 시간이 찍힌다. 그 시간이 하루에 수십억 번 쌓이면 보관함뿐 아니라 꺼내는 문도 설계해야 한다. Robert Kisteleki는 RIPE Atlas와 RIPEstat의 초기 추진에 참여했고 RIPE NCC의 연구개발을 오래 이끌었다. 2023년 11월, Paul de Weerd와 함께 그는 간단한 질문을 던졌다. 어제의 결과와 십 년 전의 결과를 언제까지 같은 속도로 꺼내 줄 수 있을까?

원문 제안은 규모부터 보여 준다. RIS는 1999년부터 라우팅 자료를, Atlas는 2010년부터 능동 측정을 모았다. 2023년 말 Atlas는 초당 약 1만 5천 건, 하루 약 13억 건의 결과를 만들었다. 측정 작업의 90% 이상은 일회성이었지만, 실제로 전달된 결과의 대부분은 계속 실행되는 측정에서 나왔다. 지금 장애를 겪는 운영자는 새 결과를, 오래된 경로 변화를 조사하는 연구자는 과거 자료를 찾는다.

그때 RIS의 압축 덤프와 업데이트 파일은 약 50TB였고, 80%가 최근 5년간 수집됐다. RIPEstat용으로 가공한 형태는 약 800TB를 차지했다. 서로 다른 용도의 저장 규모지만, 과거를 쉽게 꺼내는 데 돈이 든다는 점은 같다. Kisteleki는 재정이 버틸 만큼 자료를 오래 남기고, 자료의 나이와 요청 빈도에 따라 접근 프로토콜과 인출 시간 목표를 달리하자고 했다. 옛 결과는 기존 API 밖의 보관소로 옮겨지거나 더 천천히 제공될 수 있다. Atlas와 RIS는 각자 다른 경계선을 쓸 수 있다. 인증된 요청을 장려하고 익명 전송에는 공동 대역폭 한도를 둘 수도 있다. 비공개 Atlas 측정을 만든 사람은 적어도 한 달 동안 자기 결과를 받아 볼 수 있다.

핵심은 대기 시간이다. 파일이 남아 있어도 조사 중 찾는 길이 갑자기 바뀌면 효용이 달라진다. 제안은 모두에게 적용할 단일 삭제 시점이나 확정된 초 단위 목표를 정하지 않았다. RIPE 87 발표는 역사적 가치와 운영비를 함께 다뤘다. 2024년 5월 RIPE 메일링리스트 결론에서 팀은 의견이 많지 않았다고 밝히고, 제시한 원칙에 맞춰 저장과 접근 기능을 구현하고 있다고 했다.

측정 도구를 만든 사람이 그 도구의 기억을 관리하게 됐다. Kisteleki가 드러낸 질문은 미래의 이용자가 오래된 기록을 요청할 때 어떤 문이 열리고 얼마나 기다려야 하는가다.

RIPE 원문 자료