Во вторник, 20 октября, в дата-центре Google Cloud под Лондоном пропало электропитание. В регионе europe-west2 выросло число ошибок и начались перебои сети. Инцидент стартовал в 06:08 по Гринвичу, то есть в 09:08 по Москве.
Сильнее всего досталось финансам. Клиенты Revolut не могли снять наличные, сделать перевод или пополнить карту, о проблемах с приложением и интернет-банком сообщили Lloyds и HSBC. Downdetector собрал сотни жалоб на сайт недвижимости Rightmove и Royal Mail. Позже Google заявила, что для большинства клиентов последствия устранены, хотя у части пользователей трудности оставались.
Почему один ЦОД — это много
Облако часто воспринимают как нечто, что «не падает». На деле проект обычно живёт в одном регионе, а иногда и в одной зоне доступности, потому что так дешевле и проще. Когда в этом месте пропадает питание, не спасают ни бренд провайдера, ни SLA — компенсация придёт потом, а клиенты уходят сейчас.
Что можно сделать без больших затрат
- Держать резервные копии базы и файлов в другом регионе или у другого провайдера
- Для важного сайта — разнести серверы минимум по двум зонам доступности
- Вынести статику и страницу-заглушку на CDN, чтобы при сбое посетитель видел сообщение, а не ошибку
- Поставить внешний мониторинг доступности с уведомлением в Telegram
- Заранее записать, кто и что делает при падении: кому звонить, где переключать DNS
Наш комментарий
Небольшому сайту не нужна мультиоблачная архитектура, но план на день сбоя нужен всем. Чаще всего хватает свежего бэкапа в другом месте, мониторинга и понятной страницы «мы скоро вернёмся». Остальное зависит от того, сколько стоит вам час простоя. Источник — iXBT.com.
