Timeweb Cloud Alerts
29.9K subscribers
3 photos
21 links
Краткие оповещения о работе сервисов Клауда в реалтайме ⚡️

Комьюнити: @twcloud_chat
Новости: @timewebru
Медиа: @twc_media
Ченжлог: @twc_changelog

Для СМИ: pr@timeweb.cloud
Download Telegram
В телеграм-каналах и на даундетекторах появились сообщения о сбоях у ряда крупных сервисов и о проблемах с питанием на московских узлах связи, включая ММТС-9. Из-за этого могут быть перебои у некоторых операторов, хостингов и популярных приложений.

Наша сеть не затронута, все регионы и сервисы работают штатно.

Если заметите проблемы с доступом к своим сервисам — скорее всего, дело в связности на стороне интернет-провайдера.
❤125👍66🔥21😢18😱10❤‍🔥2
🛑 Сетевая недоступность в Нидерландах
Зона: ams-1
Тип:❗️Major

Наблюдаем недоступность сервисов в Нидерландах. Уточняем подробности.
😢266😱80🔥21👏11🎉8❤6👍4👌4❤‍🔥1🙏1
Timeweb Cloud Alerts
🛑 Сетевая недоступность в Нидерландах Зона: ams-1 Тип:❗️Major Наблюдаем недоступность сервисов в Нидерландах. Уточняем подробности.
⚠️ Обновление по инциденту
Зоны: ams-1
Тип:❗️Major

Сетевое оборудование в Нидерландах перестало отвечать, отправили в принудительную перезагрузку. Ориентировочное время восстановления в течение 20 минут.
🎉86😱34🙏16❤15👍9🔥7👌7😢5
⚠️ Плановые работы в ams-1: замена чиллера

Зоны: ams-1
Тип: плановые работы

Завтра, 11 сентября, в дата-центре Qupra пройдут работы по обслуживанию чиллера. Большую часть серверов ams-1 мы уже перевезли в новый дата-центр NorthC — их работы не затронут.

На время работ площадка перейдет на Free Cooling охлаждение. Чтобы минимизировать риски, мы ограничим энергопотребление оборудования, поэтому возможно временное снижение производительности размещенных в Qupra серверов.
👌88😱36❤12🔥5😢3🙏2👏1
🛑 Сетевая недоступность в Москве
Зона: msk-1
Тип:❗️Major

Наблюдается недоступность части сервисов в Москве. Оцениваем масштаб, скоро вернёмся с апдейтом.
😱196😢65🙏13👍9❤6🔥4🎉1
Timeweb Cloud Alerts
🛑 Сетевая недоступность в Москве Зона: msk-1 Тип:❗️Major Наблюдается недоступность части сервисов в Москве. Оцениваем масштаб, скоро вернёмся с апдейтом.
⚠️ Обновление по инциденту
Зона: msk-1
Тип:❗️Major

По уточнённой информации, был недоступен роутер в Москве, переключились на резерв. Может наблюдаться частичная недоступность в других зонах РФ.

Инженеры продолжают диагностику оборудования. Следующий апдейт через 30 минут.
😱69👍22🙏19😢16❤7👌5
Timeweb Cloud Alerts
⚠️ Обновление по инциденту Зона: msk-1 Тип:❗️Major По уточнённой информации, был недоступен роутер в Москве, переключились на резерв. Может наблюдаться частичная недоступность в других зонах РФ. Инженеры продолжают диагностику оборудования. Следующий апдейт…
⚠️ Обновление по инциденту
Зона: msk-1
Тип:❗️Major

Восстановительные работы продолжаются. Инженеры переключают control plane после холодного рестарта.

В ближайшие 15 минут может наблюдаться ухудшение ситуации с доступностью сервисов.

Следующий апдейт в 13:00.
😢49🙏28😱19❤‍🔥2👌2❤1
Timeweb Cloud Alerts
⚠️ Плановые работы в ams-1: замена чиллера Зоны: ams-1 Тип: плановые работы Завтра, 11 сентября, в дата-центре Qupra пройдут работы по обслуживанию чиллера. Большую часть серверов ams-1 мы уже перевезли в новый дата-центр NorthC — их работы не затронут.…
⚠️ Плановые работы в ams-1: замена чиллера
Зона: ams-1
Тип: плановые работы

Завтра, 17 сентября, в дата-центре Qupra пройдет второй этап работ с системой охлаждения: текущий чиллер заменят на новый. Переключение на него ожидается около 14:00 мск. Большую часть серверов ams-1 мы уже перевезли в новый дата-центр NorthC, их работы не затронут.

Простоя охлаждения не планируется: текущий чиллер остается в резерве на все время монтажа нового. Чтобы минимизировать риски, мы ограничим энергопотребление оборудования — возможно временное снижение производительности размещенных в Qupra серверов.
🙏53👍21😱14❤7👌7🔥4😢2🎉1
🛑 Недоступность панели управления Cloud
Тип:❗️Major

Наблюдаются недоступность панели управления. Инженеры занимаются восстановлением работы.
😢104😱22👍17🔥9🙏8❤‍🔥3👌3👏1
Timeweb Cloud Alerts
🛑 Недоступность панели управления Cloud Тип:❗️Major Наблюдаются недоступность панели управления. Инженеры занимаются восстановлением работы.
⚠️ Обновление по инциденту
Тип: ❗ Major

Предварительно проблема связана с Qrator. Инженеры проверяют причину и восстанавливают доступность сервисов.

Следующий апдейт — по мере появления новой информации.
❤25👍12😱7😢4🎉2🔥1🙏1
Вышел патч для двух критических уязвимостей в PHP

Разработчики PHP выпустили исправления для двух критических уязвимостей, через которые можно удаленно выполнить код на сервере (CVE-2026-109618 и CVE-2026-109619). Детали уже обсуждают публично, поэтому в ближайшие часы ожидаются массовые попытки взлома.

Если на ваших виртуальных серверах работают проекты на PHP, обновитесь как можно скорее.

1️⃣ Обновите PHP до исправленной версии

➖ 8.5.12
➖ 8.4.27
➖ 8.3.36
➖ 8.2.35

После обновления перезапустите PHP-FPM. Если PHP установлен из репозитория дистрибутива, номер версии может отличаться, ориентируйтесь на обновление пакета безопасности от Ubuntu, Debian или другого дистрибутива.

Для версий 8.1 и старше официальных исправлений нет, такие проекты стоит переводить на актуальную ветку.

2️⃣ Если обновиться сразу не получается

➖ отключите upload_progress. Задайте session.upload_progress.enabled = 0 в php.ini или в настройках пула FPM, через ini_set() и .user.ini это не сработает. Затем перезапустите все воркеры PHP-FPM
➖ ограничьте размер запросов. Если загрузка файлов не нужна, задайте post_max_size = 8M, если нужна, то 32M, а upload_max_filesize сделайте меньше post_max_size
➖ на PHP 8.5 дополнительно задайте fatal_error_backtraces = 0

Меры из п. 2 снижают риск, но не защищают полностью, поэтому обновиться все равно нужно.

Подробности и патч на php.net →
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥82👍36❤31😱14😢9❤‍🔥3🎉2
🛑Проблема с доступностью сервисов
Тип: ❗️ Major

Наблюдается недоступность сервисов Cloud. Инженеры занимаются восстановлением работы.
Апдейт через 15 минут.
😱892😢366🙏107❤23👏14🎉14🔥9👍7👌7❤‍🔥3
Timeweb Cloud Alerts
🛑Проблема с доступностью сервисов Тип: ❗️ Major Наблюдается недоступность сервисов Cloud. Инженеры занимаются восстановлением работы. Апдейт через 15 минут.
⚠️ Обновление по инциденту
Зоны: SPB, MSK, DE, NL, KZ
Тип: ❗ Major

Недоступность возникла на сетевом оборудовании. Инженеры занимаются восстановлением. Апдейт через 30 минут или раньше.
😢727😱246🙏111❤31👌19👍14🔥13❤‍🔥9🎉8👏6
Timeweb Cloud Alerts
⚠️ Обновление по инциденту Зоны: SPB, MSK, DE, NL, KZ Тип: ❗ Major Недоступность возникла на сетевом оборудовании. Инженеры занимаются восстановлением. Апдейт через 30 минут или раньше.
⚠️ Обновление по инциденту
Зоны: SPB, MSK, DE, NL, KZ
Тип: ❗ Major

Сетевая проблема устранена, большая часть сервисов поднялась. Инженеры продолжают восстанавливать оставшиеся сервисы.
❤‍🔥480👍137❤78😢49🎉44🔥22🙏21👏13👌6😱2
Timeweb Cloud Alerts
⚠️ Обновление по инциденту Зоны: SPB, MSK, DE, NL, KZ Тип: ❗ Major Сетевая проблема устранена, большая часть сервисов поднялась. Инженеры продолжают восстанавливать оставшиеся сервисы.
✅ Инцидент закрыт
Зоны: SPB, MSK, DE, NL, KZ
Тип: ❗ Major

Работа сервисов восстановлена. Разбор инцидента опубликуем позднее.
🎉519👍130🔥71❤55❤‍🔥27👏14😢12👌7😱6
Timeweb Cloud Alerts
✅ Инцидент закрыт Зоны: SPB, MSK, DE, NL, KZ Тип: ❗ Major Работа сервисов восстановлена. Разбор инцидента опубликуем позднее.
Постмортем: ограничение доступности облачных сервисов 17 ноября

Сегодня с 13:18 до 15:05 мск часть сервисов Timeweb Cloud оказалась недоступна из-за сетевого сбоя, возникшего при обновлении гипервизоров. Были затронуты все локации, кроме Новосибирска.

Рассказываем, что произошло, как восстанавливали доступность и что изменим, чтобы избежать повторения.

Что случилось

Мы проводили обновление сетевого стека гипервизоров для повышения безопасности инфраструктуры.

Во время обновления служба динамической маршрутизации перезапустилась не полностью. В результате этого гипервизоры не смогли повторно анонсировать маршруты к сетевому оборудованию, и часть серверов потеряла сетевую связность.

При этом сами виртуальные серверы продолжали работать.

Как восстанавливали работу

13:18 мск начались проблемы с сетевой доступностью серверов.
13:28 мск инженеры локализовали проблему и приступили к восстановлению.
13:47 мск сообщили о проблемах в локациях SPB, MSK, DE, NL и KZ. Инженеры полностью перезапустили сетевой стек гипервизоров, после чего маршрутизация восстановилась.
14:17 мск большая часть серверов снова стала доступна по сети.
15:05 мск работа всех сервисов в рамках инцидента полностью восстановлена.

Что дальше

➖ Расширим проверки после обновления гипервизоров: будем проверять каждый компонент службы маршрутизации, а не только службу целиком.
➖ Увеличим интервалы между этапами обновления для выявления проблемы до перехода к следующим нодам.
➖ Ускорим восстановление сетевого стека при похожих сбоях, чтобы быстрее возвращать доступность сервисов.
Please open Telegram to view this post
VIEW IN TELEGRAM
👍597❤204👏97🔥29😢21❤‍🔥19😱19🙏13👌7🎉2
20 ноября Timeweb Cloud начнет серию обновлений безопасности на всей платформе

За первые девять месяцев 2026 года в международном каталоге CVE публиковали в среднем 267 новых записей об уязвимостях в день. Для нашей облачной платформы важно оперативно проверять исправления и устанавливать их на тысячи физических серверов. Поэтому мы меняем сам порядок обновлений, чтобы в будущем часть из них проходила без перерыва для клиентов.

В ближайшие дни обновим платформу. Для нее вышли важные исправления безопасности, которые мы уже протестировали внутри. Обновлять платформу будем в несколько этапов, для этого потребуется перезагрузить серверы.

Пока мы перезагружаем оборудование, размещенные на нем сервисы будут недоступны. Ожидаемый перерыв — от 10 минут до 2 часов:

➖ Перезагрузка оборудования занимает до 10 минут, при этом клиентские сервисы поднимаются поочередно в течение более длительного времени
➖ Если после перезагрузки не запустится служба или нарушится работа кластера, это может затронуть сразу несколько связанных сервисов. В таком случае восстановление может занять больше часа.

За 24 часа до каждого этапа мы напишем клиентам, чьи сервисы он затронет. В письме укажем дату и время, чтобы команды успели перенести важные задачи и предупредить пользователей.

Здесь будем рассказывать о важных уязвимостях, которые затрагивают наше облако и пользовательские проекты, и об исправлениях для них. Объясним, что это значит для ваших сервисов, что мы делаем со своей стороны и нужно ли что-то сделать вам.

Мы меняем порядок обновлений, чтобы быстрее устанавливать важные исправления и реже прерывать работу ваших проектов. Инженеры будут контролировать все этапы, мониторить возникающие ошибки и исправлять их вручную.

Команда Timeweb Cloud
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥130❤69👍54😱18😢14❤‍🔥1👏1