← Все новости

DevOps ·

«Энергетическое событие» положило зону Google Cloud в Лондоне почти на 8 часовA "power event" knocked out a Google Cloud London zone for nearly 8 hours

Утром 20 октября отказ питания в зоне europe-west2-b затронул GKE, Cloud Run, App Engine, Filestore и другие сервисы. Пострадали Lloyds, HSBC, Royal Mail, Revolut и другие британские компании.On the morning of Oct 20 a power failure in the europe-west2-b zone hit GKE, Cloud Run, App Engine, Filestore and more. Lloyds, HSBC, Royal Mail, Revolut and other UK companies were affected.

20 октября в 06:08 UTC начался сбой в зоне europe-west2-b — одной из трёх зон доступности лондонского региона Google Cloud. Google объяснила его коротко: «энергетическое событие вызвало отказ в зоне europe-west2-b».

Что было затронуто

  • По статусной странице: BigQuery Data Transfer Service, Cloud Filestore, Cloud Run, App Engine, NetApp Volumes, Google Kubernetes Engine и Managed Service for Apache Kafka. По оценкам, всего пострадали десятки сервисов — около 38.
  • Среди пострадавших клиентов называют Lloyds Bank, HSBC, Royal Mail, Rightmove, DPD, BT, Screwfix и Revolut — у части из них не работали мобильные приложения и онлайн-банкинг.

Хронология

  • 06:08 UTC — начало сбоя.
  • 11:58 UTC — Google «предварительно» ожидала полного восстановления к 13:00.
  • 14:03 UTC — проблема устранена для большинства клиентов, небольшое число всё ещё испытывало трудности.

Итого — почти 8 часов. ThousandEyes описывает событие как полную потерю доступности в регионе, другие источники — как сбой одной зоны; подробный разбор Google обещала после внутреннего расследования.

Выводы

Сбой одной зоны не должен ронять сервис, но на практике многие нагрузки привязаны к зоне: зональные кластеры GKE, Filestore, тома NetApp, одиночные инстансы БД. Стоит проверить, что продовые кластеры GKE региональные, хранилища реплицируются между зонами, а планы аварийного восстановления учитывают сценарий «зона пропала на полдня», а не на пару минут.

On Oct 20 at 06:08 UTC an outage began in europe-west2-b, one of three availability zones in Google Cloud’s London region. Google’s explanation was brief: “A power event caused an outage within europe-west2-b zone.”

What was affected

  • Per the status page: BigQuery Data Transfer Service, Cloud Filestore, Cloud Run, App Engine, NetApp Volumes, Google Kubernetes Engine and Managed Service for Apache Kafka. Estimates put the total at dozens of services — around 38.
  • Reported casualties include Lloyds Bank, HSBC, Royal Mail, Rightmove, DPD, BT, Screwfix and Revolut — some saw mobile apps and online banking go down.

Timeline

  • 06:08 UTC — the outage starts.
  • 11:58 UTC — Google “tentatively” expects full recovery by 13:00.
  • 14:03 UTC — mitigated for most customers, with a small number still affected.

That is nearly 8 hours in total. ThousandEyes describes a complete loss of availability in the region, while other sources describe a single-zone failure; Google promised a detailed analysis after its internal investigation.

Takeaways

A single zone failure should not take a service down, but in practice many workloads are zone-bound: zonal GKE clusters, Filestore, NetApp volumes, single database instances. Check that production GKE clusters are regional, storage replicates across zones, and DR plans cover a zone disappearing for half a day, not just a few minutes.

Источники