Back to overview
Downtime

Недоступность локации ru.vrn

Sep 22 at 03:20pm MSK
Affected services
CUBE-1

Resolved
Sep 30 at 12:56pm MSK

Доступность региона ru.vrn

Updated
Sep 27 at 05:35pm MSK

Management plane доступен, публичный маршрут все еще недоступен

Updated
Sep 26 at 05:34pm MSK

5 дней даунтайма? У провайдера новый отвал всей сети, от него отстыковался Квант-Телеком. Я в шоке.

Updated
Sep 24 at 05:20pm MSK

50 часов с момента отвала. Что нового стало известно:
- Мощность атаки была минимум 55-60 гбит/с, дальше сеть легла, а метрика есть только почасовая
- Мы заключили договор с новым апстримом, у которого пиринг 200 гбит/с. Идет бумажная работа и так далее
- Я реализовал netflow мониторинг на глобальном роутере, теперь мы видим когда на нас. идет атака и если идет небольшая атака направленная на клиента
- Подготовили план открытия POP в Германии (10гбит с защитой от DDoS)

Кроме этого ничего интересного в плане сетей нет

Updated
Sep 24 at 01:00pm MSK

45 часов после начала инцидента.

Пострадал ВЕСЬ маршрут. Восстановили ядро сети и северную ветвь. А вот пограничные маршрутизаторы ушли в дедлок, потенциально требуется замена. Мб это я тупой, но сколько трафика вообще прилетело?

Updated
Sep 23 at 03:30pm MSK

Спустя 24 часа после начала инцидента сеть провайдера все еще лежит и иногда выплевывает тонну BGP анонсов в приступе эпилепсии.

Если верить сторонним источникам, проблема в том, что все маршруты анонсировались через стык в 40 гбит/с 🤡
На данный момент мы не нашли новых провайдеров с приемлемыми условиями и прайсом.

Updated
Sep 22 at 05:00pm MSK

Ядро сети провайдера вернулось к жизни, DNS серверы и небольшая часть инфры доступна. Основные маршруты все еще недоступны

Created
Sep 22 at 03:20pm MSK

После DDoS атаки на нашу локацию в Воронеже, для которой была отключена DDoS защита неделей ранее, упала сеть провайдера во всем городе.

P.S. AS провайдера захлебнулась в собственном BGP соку: https://radar.cloudflare.com/routing/as34550
На момент 15:20 вся подсеть провайдера недоступна