Incidents | HYPRR

Website (hyprr.space) recovered

Sun, 07 Jun 2026 05:34:46 +0000

Website (hyprr.space) recovered

Website (hyprr.space) went down

Sun, 07 Jun 2026 05:32:38 +0000

Website (hyprr.space) went down

Lomiri API (Minecraft) recovered

Sat, 06 Jun 2026 15:39:07 +0000

Lomiri API (Minecraft) recovered

Website (hyprr.space) recovered

Sat, 06 Jun 2026 15:28:39 +0000

Website (hyprr.space) recovered

Website (hyprr.space) went down

Sat, 06 Jun 2026 15:20:18 +0000

Website (hyprr.space) went down

Lomiri API (Minecraft) went down

Sat, 06 Jun 2026 14:59:12 +0000

Lomiri API (Minecraft) went down

Lomiri API (Minecraft) recovered

Sat, 06 Jun 2026 14:38:50 +0000

Lomiri API (Minecraft) recovered

Lomiri API (Minecraft) went down

Sat, 06 Jun 2026 14:19:36 +0000

Lomiri API (Minecraft) went down

LUCID-2 [Xeon X5690, DDR3] recovered

Fri, 05 Jun 2026 14:20:01 +0000

LUCID-2 [Xeon X5690, DDR3] recovered

Lomiri API (Minecraft) recovered

Fri, 05 Jun 2026 14:18:42 +0000

Lomiri API (Minecraft) recovered

Website (hyprr.space) recovered

Fri, 05 Jun 2026 14:07:46 +0000

Website (hyprr.space) recovered

LUCID-1 [Xeon X5690, DDR3] recovered

Fri, 05 Jun 2026 14:05:05 +0000

LUCID-1 [Xeon X5690, DDR3] recovered

LUCID-1 [Xeon X5690, DDR3] went down

Fri, 05 Jun 2026 14:00:23 +0000

LUCID-1 [Xeon X5690, DDR3] went down

LUCID-2 [Xeon X5690, DDR3] went down

Fri, 05 Jun 2026 13:57:34 +0000

LUCID-2 [Xeon X5690, DDR3] went down

Website (hyprr.space) went down

Fri, 05 Jun 2026 13:53:35 +0000

Website (hyprr.space) went down

Lomiri API (Minecraft) went down

Fri, 05 Jun 2026 13:44:38 +0000

Lomiri API (Minecraft) went down

Lomiri API (Minecraft) recovered

Thu, 28 May 2026 19:58:39 +0000

Lomiri API (Minecraft) recovered

Lomiri API (Minecraft) went down

Thu, 28 May 2026 19:24:03 +0000

Lomiri API (Minecraft) went down

LUCID-2 [Xeon X5690, DDR3] recovered

Mon, 25 May 2026 17:30:02 +0000

LUCID-2 [Xeon X5690, DDR3] recovered

DELTA-1 [Ryzen 7 5800X, DDR4] recovered

Mon, 25 May 2026 17:30:02 +0000

DELTA-1 [Ryzen 7 5800X, DDR4] recovered

LUCID-1 [Xeon X5690, DDR3] recovered

Mon, 25 May 2026 17:30:02 +0000

LUCID-1 [Xeon X5690, DDR3] recovered

LUCID-2 [Xeon X5690, DDR3] went down

Mon, 25 May 2026 16:57:38 +0000

LUCID-2 [Xeon X5690, DDR3] went down

LUCID-1 [Xeon X5690, DDR3] went down

Mon, 25 May 2026 16:57:36 +0000

LUCID-1 [Xeon X5690, DDR3] went down

DELTA-1 [Ryzen 7 5800X, DDR4] went down

Mon, 25 May 2026 16:56:33 +0000

DELTA-1 [Ryzen 7 5800X, DDR4] went down

Lomiri API (Minecraft) recovered

Sun, 17 May 2026 15:38:43 +0000

Lomiri API (Minecraft) recovered

Website (hyprr.space) recovered

Sun, 17 May 2026 15:31:39 +0000

Website (hyprr.space) recovered

Website (hyprr.space) went down

Sun, 17 May 2026 14:26:16 +0000

Website (hyprr.space) went down

Lomiri API (Minecraft) went down

Sun, 17 May 2026 13:39:38 +0000

Lomiri API (Minecraft) went down

LUCID-2 [Xeon X5690, DDR3] recovered

Sat, 09 May 2026 00:00:02 +0000

LUCID-2 [Xeon X5690, DDR3] recovered

Lomiri API (Minecraft) recovered

Fri, 08 May 2026 16:33:49 +0000

Lomiri API (Minecraft) recovered

LUCID-1 [Xeon X5690, DDR3] recovered

Fri, 08 May 2026 16:20:21 +0000

LUCID-1 [Xeon X5690, DDR3] recovered

DELTA-1 [Ryzen 7 5800X, DDR4] recovered

Fri, 08 May 2026 16:20:12 +0000

DELTA-1 [Ryzen 7 5800X, DDR4] recovered

LUXOR-1 [Ryzen 7 9700X, DDR5] recovered

Fri, 08 May 2026 16:20:04 +0000

LUXOR-1 [Ryzen 7 9700X, DDR5] recovered

Website (hyprr.space) recovered

Fri, 08 May 2026 16:19:48 +0000

Website (hyprr.space) recovered

LUCID-2 [Xeon X5690, DDR3] went down

Fri, 08 May 2026 09:22:47 +0000

LUCID-2 [Xeon X5690, DDR3] went down

LUCID-1 [Xeon X5690, DDR3] went down

Fri, 08 May 2026 09:22:44 +0000

LUCID-1 [Xeon X5690, DDR3] went down

LUXOR-1 [Ryzen 7 9700X, DDR5] went down

Fri, 08 May 2026 09:21:43 +0000

LUXOR-1 [Ryzen 7 9700X, DDR5] went down

DELTA-1 [Ryzen 7 5800X, DDR4] went down

Fri, 08 May 2026 09:21:41 +0000

DELTA-1 [Ryzen 7 5800X, DDR4] went down

Website (hyprr.space) went down

Fri, 08 May 2026 09:14:45 +0000

Website (hyprr.space) went down

Lomiri API (Minecraft) went down

Fri, 08 May 2026 09:14:40 +0000

Lomiri API (Minecraft) went down

Website (hyprr.space) recovered

Sat, 02 May 2026 22:46:37 +0000

Website (hyprr.space) recovered

Website (hyprr.space) went down

Sat, 02 May 2026 22:19:46 +0000

Website (hyprr.space) went down

Lomiri API (Minecraft) recovered

Sat, 18 Apr 2026 00:58:54 +0000

Lomiri API (Minecraft) recovered

LUCID-1 [Xeon X5690, DDR3] recovered

Sat, 18 Apr 2026 00:55:03 +0000

LUCID-1 [Xeon X5690, DDR3] recovered

LUCID-2 [Xeon X5690, DDR3] recovered

Sat, 18 Apr 2026 00:55:03 +0000

LUCID-2 [Xeon X5690, DDR3] recovered

Website (hyprr.space) recovered

Sat, 18 Apr 2026 00:52:42 +0000

Website (hyprr.space) recovered

LUCID-1 [Xeon X5690, DDR3] went down

Fri, 17 Apr 2026 22:52:39 +0000

LUCID-1 [Xeon X5690, DDR3] went down

LUCID-2 [Xeon X5690, DDR3] went down

Fri, 17 Apr 2026 22:52:31 +0000

LUCID-2 [Xeon X5690, DDR3] went down

Lomiri API (Minecraft) went down

Fri, 17 Apr 2026 22:49:31 +0000

Lomiri API (Minecraft) went down

Website (hyprr.space) went down

Fri, 17 Apr 2026 22:47:31 +0000

Website (hyprr.space) went down

DELTA-1 [Ryzen 7 5800X, DDR4] recovered

Fri, 10 Apr 2026 14:10:03 +0000

DELTA-1 [Ryzen 7 5800X, DDR4] recovered

LUCID-1 [Xeon X5690, DDR3] recovered

Fri, 10 Apr 2026 14:10:02 +0000

LUCID-1 [Xeon X5690, DDR3] recovered

LUCID-1 [Xeon X5690, DDR3] went down

Fri, 10 Apr 2026 10:52:40 +0000

LUCID-1 [Xeon X5690, DDR3] went down

DELTA-1 [Ryzen 7 5800X, DDR4] went down

Fri, 10 Apr 2026 10:51:34 +0000

DELTA-1 [Ryzen 7 5800X, DDR4] went down

Восстановление ноды LUCID-2

Wed, 04 Mar 2026 21:00:00 -0000

Накрылся серверный БП. Такие искать долго(

Работа на сети в Германии

Thu, 15 Jan 2026 20:00:04 -0000

Работа на сети в Германии

Обновление роутеров и алгоритмов шифрования трафика

Tue, 16 Dec 2025 07:30:59 -0000

Последние дни поступали жалобы о низкой скорости соединения. Иногда Speedtest показывал входящую скорость 5 мбит/с, что очень мало. Мы проведем работы на сети для поиска и исправления проблем со скоростью

Обновление оборудования и сети в Московской локации

Fri, 05 Sep 2025 08:35:00 -0000

Maintenance completed

Обновление оборудования и сети в Московской локации

Fri, 05 Sep 2025 08:00:00 -0000

• Увеличение объема ОЗУ на ноде PORTAL-1 • Увеличение объема ОЗУ на ноде DELTA-1 • Увеличение пропускной способности роутера MSK-ROUTER0 с 1 Гбит/с до 10 Гбит/с

Задержка смены IP для DELTA-1, неожиданный даунтайм

Mon, 04 Aug 2025 09:28:00 -0000

DELTA-1 получила новый IP, компенсация - 6 дней за ровно 12 часов недоступности. Вдобавок к этому это последняя работа на сети в Москве

Задержка смены IP для DELTA-1, неожиданный даунтайм

Sun, 03 Aug 2025 23:25:00 -0000

Старый IP мы отпустили, а новую подсеть нам задержали

Деградация K8s кластера

Wed, 23 Jul 2025 22:12:00 -0000

Я НЕ знаю что произошло и почему все работает сейчас, причем так как и всегда - без единого намека на инцидент, заставивший стафф поседеть. Была ли проблема в сети, в K8s, в РКН, в убогости птеродактиля или в чем либо еще - я без понятия, может быть было все и сразу. В любом случае оно работает, по SLA компенсации не будет, так как этот инцидент не затрагивал сами ноды. И у HYPRR не будет какой либо нормальной SLA пока такая хрень продолжается - мы не знаем чья это вина, мы не знаем почему что-либо происходит. РКН проводит блокировки и тесты когда и где хочет. Баннер о деградации сервисов Cloudflare (вообще, не только в РФ) появляется каждую неделю. Мир разваливается. Так что по крайней мере я не знаю как считать SLA, если даже не понятно что влияет на него. Зато есть моды на капибару 😍

Деградация K8s кластера

Wed, 23 Jul 2025 15:00:00 -0000

Где-то между 15:00 мск и 18:00 мск происходил такой ужас, что админ пережил экзистенциальный кризис, пару клинических смертей, отвал Pterodactyl на ровном месте (ни логов, ни ошибок в stderr, просто 503) и тепловую смерть вселенной. На этом админ покидает вас и прод, я так больше не могу

Деградация K8s кластера

Wed, 23 Jul 2025 13:00:00 -0000

HALO GAYS TODAY WE HAVE TOP 5 CRASHOUT REASONS: Numero cinco: Got an error reading communication packets (MariaDB) Numero cuatro: Entry for is not found in ARP table Numero tres: Fatal error: can't open the AOF manifest file appendonlydir/appendonly.aof.manifest for reading: Input/output error Numero dos: No healthy replicas Numero uno: Reading registry-1.docker.io: i/o timeout

Деградация K8s кластера

Wed, 23 Jul 2025 12:30:00 -0000

Reasonable crashout: машины могут подключиться к интернету, но не к DOCKER HUB. Симптомы ркновские - http работает и просит редирект, https уходит в таймаут на SSL рукопожатии. У админа тряска и желание убивать

Деградация K8s кластера

Wed, 23 Jul 2025 12:00:00 -0000

Том восстановить не удалось. Он был пересоздан и проверен на целостность. Начат запуск сервисов

Деградация K8s кластера

Wed, 23 Jul 2025 11:40:00 -0000

Перезагружена конфигурация на всех роутерах, сброшен conntrack, связность восстановлена. Продолжаем изучать проблему с томами Longhorn

Деградация K8s кластера

Wed, 23 Jul 2025 11:10:00 -0000

Наблюдаются неполадки с SDN сетью в Москве. Потенциально это и стало причиной рассинхронизации и повреждения томов. Изучаются проблемы и доступность нод

Деградация K8s кластера

Wed, 23 Jul 2025 10:50:00 -0000

Все сервисы отключены, здоровые реплики найдены. Сделан бэкап. Начинаем попытку восстановления

Деградация K8s кластера

Wed, 23 Jul 2025 10:30:00 -0000

Наблюдается повреждение тома Longhorn (ошибка i/o). Начат поиск здоровых и целых реплик

Деградация K8s кластера

Wed, 23 Jul 2025 10:05:00 -0000

Наблюдается деградация API панели, выясняются обстоятельства