Timeweb Cloud Alerts
29.9K subscribers
3 photos
21 links
Краткие оповещения о работе сервисов Клауда в реалтайме ⚡️

Комьюнити: @twcloud_chat
Новости: @timewebru
Медиа: @twc_media
Ченжлог: @twc_changelog

Для СМИ: pr@timeweb.cloud
Download Telegram
Timeweb Cloud Alerts
⚠️ Обновление по инциденту Зона: ams-1 Тип:❗️Major Новости от ЦОДа: силовые кабели доставлены на площадку, в настоящий момент инженеры ЦОД и сервисной организации выполняют работы по их подключению , на это потребуется какое-то время, дальше будет запуск.…
⚠️ Обновление по инциденту
Зона: ams-1
Тип:❗️Major

Новости от ЦОДа: на данный момент удалось запустить фрикулинг, специалисты следят за температурами в машзалах. Инженеры уже на месте и в течение часа ожидают включения резервного чиллера на охлаждение.

Биллинг managed-сервисов остановлен, на очереди бэкапы.
🔥222😢84👍28🙏20😱17❤13🎉12❤‍🔥6👌3👏2
Timeweb Cloud Alerts
⚠️ Обновление по инциденту Зона: ams-1 Тип:❗️Major Новости от ЦОДа: на данный момент удалось запустить фрикулинг, специалисты следят за температурами в машзалах. Инженеры уже на месте и в течение часа ожидают включения резервного чиллера на охлаждение. Биллинг…
⚠️ Обновление по инциденту
Зона: ams-1
Тип:❗️Major

Приступаем к поэтапному запуску сетевой инфраструктуры и стоек.

Инженеры выполняют подключение и проверку оборудования, далее — восстановление сервисов по мере стабилизации охлаждения и температурных режимов в зонах размещения.
😱140🙏112❤58🔥27😢19🎉17❤‍🔥10👏7👍5👌3
Timeweb Cloud Alerts
⚠️ Обновление по инциденту Зона: ams-1 Тип:❗️Major Приступаем к поэтапному запуску сетевой инфраструктуры и стоек. Инженеры выполняют подключение и проверку оборудования, далее — восстановление сервисов по мере стабилизации охлаждения и температурных режимов…
⚠️ Обновление по инциденту
Зона: ams-1
Тип:❗️Major

Коммутаторы успешно запущены и переведены в рабочий режим.
Выполняется проверка линков и состояния портов, идет восстановление сетевой связности между стойками.
👍247🙏84❤43🎉36😢17🔥10❤‍🔥7😱7👌4👏3
Timeweb Cloud Alerts
⚠️ Обновление по инциденту Зона: ams-1 Тип:❗️Major Коммутаторы успешно запущены и переведены в рабочий режим. Выполняется проверка линков и состояния портов, идет восстановление сетевой связности между стойками.
⚠️ Обновление по инциденту
Зона: ams-1
Тип:❗️Major

Начали постепенный запуск серверов.
Оборудование вводится в эксплуатацию поэтапно, проводится проверка работоспособности и готовности к запуску сервисов.
🔥378❤76🙏46❤‍🔥30😢28👍15😱12🎉11👌6👏4
Timeweb Cloud Alerts
⚠️ Обновление по инциденту Зона: ams-1 Тип:❗️Major Идет поэтапный запуск виртуальных серверов.
⚠️ Обновление по инциденту
Зона: ams-1
Тип:❗️Major

Половина серверов в локации запущено.

Продолжаем поэтапный запуск остального оборудования.
❤‍🔥254🔥113❤61🎉39😢30🙏18👏6👌5😱3
Timeweb Cloud Alerts
⚠️ Обновление по инциденту Зона: ams-1 Тип:❗️Major Половина серверов в локации запущено. Продолжаем поэтапный запуск остального оборудования.
⚠️ Обновление по инциденту
Зона: ams-1
Тип:❗️Major

На текущий момент запущено около 80% серверов.

Продолжается поэтапное восстановление оставшейся части инфраструктуры и клиентских VDS.
❤234❤‍🔥76🙏57😢24👍23🔥16🎉13👌4😱1
Timeweb Cloud Alerts
⚠️ Обновление по инциденту Зона: ams-1 Тип:❗️Major На текущий момент запущено около 80% серверов. Продолжается поэтапное восстановление оставшейся части инфраструктуры и клиентских VDS.
✅ Инцидент закрыт
Зона: ams-1
Тип: ❗️ Major

Восстановление завершено.

Сервисы в ams-1 работают в штатном режиме.
🎉556👍117🔥86❤34😢21❤‍🔥17👏9😱7👌5🙏3
🛑 Аварийные работы по обновлению инфраструктуры
Зоны: global
Тип: ❗️ Major

В ядре Linux выявлена критическая уязвимость CVE-2026-53359 в компоненте KVM. Для устранения рисков 10 июля с 01:00 до 08:00 мск проведем обновление инфраструктуры.

Во время работ облачные серверы будут последовательно перезапущены.
Ожидаемая недоступность каждого сервера — до 5 минут.

Работы будут выполняться сегментами поочерёдно.
😢108👍67😱24🙏11❤10🎉8👌8🔥6👏6
Timeweb Cloud Alerts
🛑 Аварийные работы по обновлению инфраструктуры Зоны: global Тип: ❗️ Major В ядре Linux выявлена критическая уязвимость CVE-2026-53359 в компоненте KVM. Для устранения рисков 10 июля с 01:00 до 08:00 мск проведем обновление инфраструктуры. Во время работ…
✅ Инцидент закрыт
Зона: global
Тип: ❗️ Major

Работы по обновлению инфраструктуры, связанные с устранением рисков критической уязвимости CVE-2026-53359 в компоненте KVM ядра Linux, успешно завершены.

Все сервисы доступны и функционируют в штатном режиме.
🙏66👍60❤22🔥17😢12🎉8😱4👌3
🔴 Программный сбой с S3 хранилищем.

Зоны: spb-1, spb-2, spb-3, spb-4, spb-5
Тип: ❗️ Major

Возник программный сбой с S3 хранилищем.

Все данные на месте. Инженеры работают над решением проблемы.
😱115😢32🙏19👏7🔥6👍3❤2❤‍🔥2
Timeweb Cloud Alerts
🔴 Программный сбой с S3 хранилищем. Зоны: spb-1, spb-2, spb-3, spb-4, spb-5 Тип: ❗️ Major Возник программный сбой с S3 хранилищем. Все данные на месте. Инженеры работают над решением проблемы.
✅ Инцидент закрыт
Зоны: spb-1, spb-2, spb-3, spb-4, spb-5
Тип: ❗️ Major

Работа S3 полностью восстановлена в 14:40 мск.

Инженеры продолжают наблюдать за стабильностью работы сервиса.
👌32🔥22👍11🙏7❤4🎉4😢1
🔴 Программный сбой с S3 хранилищем.

Зоны: spb-1, spb-2, spb-3, spb-4, spb-5
Тип: ❗️ Major

Возник программный сбой с S3 хранилищем.

Инженеры работают над решением проблемы.
😱46😢22🎉13👏6👍3
Timeweb Cloud Alerts
🔴 Программный сбой с S3 хранилищем. Зоны: spb-1, spb-2, spb-3, spb-4, spb-5 Тип: ❗️ Major Возник программный сбой с S3 хранилищем. Инженеры работают над решением проблемы.
✅ Инцидент закрыт
Зоны: spb-1, spb-2, spb-3, spb-4, spb-5
Тип: ❗️ Major

Работа S3 восстановлена в 16:01 мск.

Инженеры продолжают наблюдать за стабильностью работы сервиса.
🔥26👏8❤‍🔥5👍4😱2🙏2❤1
🛑 Сетевая недоступность в Германии
Зоны: de-1
Тип: ❗️ Major

Фиксируем сетевую недоступность в Германии.
Разбираемся в причинах.
😢32😱8🔥2👏2
⚠️ Обновление по инциденту
Зоны: de-1
Тип:❗️Major

Аварийная ситуация в ДЦ Equinix FR5. Недоступен коммутатор опорной сети, через который обеспечивается подключение ДЦ NTT, где размещены серверы.
😱55😢16❤5👏3
⚠️ Обновление по инциденту
Зоны: de-1
Тип:❗️Major

По новой информации, в дата-центре произошла утечка воды. В настоящее время проводится расследование обстоятельств инцидента.

Будем публиковать обновления по мере поступления дополнительной информации.
😱115😢24❤5🙏4👏2🔥1🎉1👌1
⚠️ Авария во Франкфурте: что известно на данный момент

Зоны: de-1
Тип:❗️Major

Рассказываем подробно, что происходит и почему.

Что произошло

Авария случилась не на нашей площадке, а на промежуточном узле — в дата-центре Equinix FR5 во Франкфурте. Это один из крупнейших телеком-хабов Европы, и через него проходят все наши каналы связи до площадки, где размещены серверы de-1. Само оборудование с вашими данными не пострадало — потеряна сетевая связность.

По информации от площадки, в FR5 дала течь труба системы охлаждения машинных залов. Протечка затронула все системы охлаждения здания, температура поднялась выше 50 °C, сработала система пожаротушения, и сетевое оборудование начало массово отключаться. Дополнительно мы фиксируем множественные аварии на каналах и магистралях в регионе.

Таймлайн по мск

05:33 — AWS фиксирует первые потери пакетов на линках через FR5
05:41 — в FR5 обнаружена протечка трубы системы охлаждения
06:32 — магистральный оператор Core-Backbone фиксирует рост температуры в залах
07:25 — критическая температура, массовые обрывы связи по всему ДЦ
07:26 — утечка локализована, начата заправка контура охлаждения
08:09 — значительная часть оборудования в ДЦ отключилась
09:38 — в залах работают осушители, идёт откачка воды
10:30 — на площадку прибыли инженеры вендоров чиллеров и противопожарной системы

Сейчас план у Equinix такой: продуть контур охлаждения от воздуха и по одному тестово запускать чиллеры. Доступ к оборудованию в пострадавших залах пока закрыт — там вода и оборудование под напряжением.

Это глобальный сбой, не только у нас

FR5 — точка присутствия десятков операторов, и авария ударила по многим:

• AWS официально подтверждает деградацию Direct Connect в eu-central-1 из-за «инфраструктурной проблемы на площадке Equinix FR5» и оценивает восстановление в «multiple hours»: health.aws.amazon.com/health/status
• Core-Backbone потерял в FR5 четыре узла, публикует детальный отчёт: status.core-backbone.com/index.php?id=6709
• SMARTNET подтверждает недоступность ряда операторов в FR5, включая магистрального RETN: status.as203446.net/item.php?id=10
• На allestörungen.de (немецкий Downdetector) — всплеск жалоб на провайдеров по всей Германии.

Когда всё заработает

Точного ETR у поставщиков пока нет — он появится после того, как ДЦ восстановит охлаждение и откроет доступ к оборудованию. Наши инженеры на связи с партнёрами и готовы приступить к проверке связности сразу после восстановления узла.

Будем публиковать апдейты по мере поступления информации.
😱197❤56🙏33😢25👍12🔥5👌5❤‍🔥1
⚠️ Авария во Франкфурте: дата-центр восстанавливает охлаждение и питание

Зоны: de-1
Тип:❗️Major

Делимся свежей информацией с площадки:

• На третьем этаже ДЦ охлаждение восстановлено: запущены три чиллера, для подстраховки развёрнуты временные холодильные установки, на площадку везут дополнительные.

• На первом и втором этажах работы продолжаются: бригады проверяют герметичность системы и постепенно возвращают подачу охлаждённой воды.

• В стойки начали поэтапно подавать питание.

• Наш опорный коммутатор уже доступен

Что дальше

Ждём, когда поднимутся стойки операторов связи в ДЦ. Как только оборудование будет запущено, связность до площадки с серверами de-1 восстановится.

Операторы уже в процессе — например, RETN сообщает, что их инженер получил доступ в машинный зал и началось включение оборудования.

Точное время назвать пока не можем — питание на стойки части операторов ещё не подано.
🙏89👌27😢20🔥17❤13👍8
✅ Авария во Франкфурте: инцидент закрыт
Зоны: de-1
Тип:❗️Major

Стойки операторов связи запущены, связанность до площадки в Германии восстановлена.
👍104❤32👏22🔥8😢6❤‍🔥5👌4😱2