F5 устранила ухудшение работы Global Log Receiver

Кратко

6 сентября F5 устранила ухудшение работы Distributed Cloud Global Log Receiver, которое с 5 сентября затрагивало одного клиента
Клиентский трафик и сервисы Distributed Cloud Console продолжали работать, однако F5 не сообщила, поступили ли затронутые логи с задержкой, были потеряны или позже восстановлены

Факты

6 сентября в 07:54 UTC F5 устранила инцидент, затронувший работу Distributed Cloud Global Log Receiver. Компания расследовала сообщения об ухудшении работы сервиса с 5 сентября.

F5 сообщила, что последствия инцидента ограничились одним клиентом, с которым компания связалась напрямую. Компания также заявила, что клиентский трафик не пострадал, а сервисы Distributed Cloud Console продолжали работать. Global Log Receiver предназначен для приёма данных логов, поэтому описанная проблема касалась доставки логов, а не самого трафика приложений.

Сторонний сервис отслеживания статуса зафиксировал около 12 часов 50 минут между обнаружением и устранением проблемы. Этот интервал отражает период мониторинга инцидента и не означает, что клиентский трафик был недоступен всё это время.

Оценка

Для затронутого клиента проблема заключалась не в прохождении трафика приложений через F5, а в получении логов, необходимых для наблюдения за тем, что происходило с этим трафиком, и расследования таких событий.

Приложения могли оставаться доступными, тогда как доступность информации, необходимой командам безопасности и эксплуатации, снизилась.

Поэтому восстановление не сводится к возвращению Global Log Receiver в рабочее состояние. Клиенту также нужно знать, что произошло с логами, созданными во время инцидента: поступили ли они с задержкой, были отброшены или стали доступны после восстановления сервиса. В обновлении статуса F5 этих подробностей нет, поэтому оно не позволяет утверждать, что какие-либо данные логов были безвозвратно утрачены.

Мониторинг одной лишь доступности трафика не выявил бы этот инцидент. Командам, использующим сервис, необходимо отдельно контролировать доставку логов, если эти записи нужны им для расследований в сфере безопасности или операционных проверок.

За чем следить

Следить стоит за тем, объяснит ли F5, поступили ли логи, созданные во время инцидента, с задержкой, были отброшены или восстановлены после возвращения сервиса в работу, а также опубликует ли компания данные о первопричине. Любое повторное ухудшение работы Global Log Receiver также поможет понять, был ли это единичный инцидент, затронувший одного клиента, или повторяющаяся проблема сервиса.