Кратко

  • 8 ноября RIPE NCC объяснил недоступность нескольких API RIPEstat исчерпанием файловых дескрипторов в базе RIS Looking Glass: в настройке стоял предел 32 тысячи.
  • К 20:06 UTC пропускная способность API почти восстановилась, однако данные примерно десятой части пиров RRC25 ещё отставали при воспроизведении сообщений BGP.

Справочная открылась, архив ещё разбирал очередь. В 13:39 UTC 8 ноября RIPE NCC сообщил, что база Looking Glass восстановилась, а пропускная способность API RIPEstat близка к обычной. Вечером у коллектора RRC25 оставалась задержка приблизительно по каждому десятому пиру. Получить ответ снова стало возможно; считать его наблюдением текущего момента — только после проверки времени записи.

Причина получила точное число. База данных RIS Looking Glass исчерпала установленный лимит в 32 тысячи файловых дескрипторов. Внутренний API, обслуживавший запросы Looking Glass, занял все доступные слоты обработки. Первый тикет RIPE NCC получил в 00:58 UTC; публичное сообщение в 12:51 UTC перечислило недоступные Looking Glass, RIS Peers и другие API. Время тикета показывает первую жалобу, а не установленное начало отказа.

После восстановления базы Looking Glass воспроизводил накопившиеся за предыдущие часы BGP-сообщения. В обновлении на 20:06 UTC RIPE NCC указал, что из-за объёма этих сообщений задерживалась около десятой части пиров RRC25. Завершение ожидалось примерно к 05:00 UTC 9 ноября. На момент проверки страница инцидента всё ещё имела статус мониторинга.

Документация Looking Glass описывает данные по коллекторам и пирам, с отметками последнего изменения и подтверждения маршрута. Для работы с историей маршрута эти отметки важнее самого факта ответа API. RIPE NCC пока не опубликовал конечное время, когда оставшиеся пиры догнали поток; запись об этом вместе с закрытием инцидента завершит хронологию.

Первоисточники: инцидент RIPE NCC; документация Looking Glass; документация RIS Peers.