Osegi
Веб и разработка·1 мин чтения

Google Cloud объяснила сбой в Лондоне ошибкой настройки PLC

Google Cloud сообщила, что ошибка в конфигурации PLC и изъян системы измерения напряжения не дали запуститься резервным генераторам во время сбоя в Лондоне 20 октября.

Rows of backup diesel generators outside a large datacenter building at dusk.
Фото: theregister
SUMODialoediviewergiftdetect

Google Cloud раскрыла причину сбоя 20 октября в зоне доступности europe-west-2-b в Лондоне. По данным компании, из-за неверной конфигурации систем не запустились аварийные генераторы. Перебои затронули сервисы Lloyds, HSBC, Royal Mail и Revolut.

Что произошло

В обновлении страницы статуса от 4 ноября Google пояснила, что площадка использует архитектуру питания 2N: для каждой критичной нагрузки предусмотрены полностью дублированные линии. Резервом служит центральный банк высоковольтных генераторов, которым управляет дважды резервированный программируемый логический контроллер (PLC). Электричество поступает по двум независимым вводам, которые компания называет «A» и «B».

Первопричиной стал отказ внешнего подземного кабеля поставщика электроэнергии, подключённого к вводу A. Он вышел из строя, когда ввод B был отключён: его автомат физически разомкнули для ремонта после проблем, выявленных при квартальном нагрузочном тесте генераторов 14 октября 2026 года. Вся критичная нагрузка держалась на одной линии.

ИБП сработали, генераторы нет

Источники бесперебойного питания (ИБП) в europe-west-2-b способны поддерживать работу пять минут после потери связи с сетью и отработали штатно. Однако конструктивный изъян в измерении напряжения и ошибка конфигурации PLC не позволили отправить генераторной установке автоматический сигнал запуска. Логика контроллера считала, что исправный внешний источник доступен, хотя основной и вторичный фидеры были обесточены, и команду на запуск не выдала. Когда ИБП разрядились, питание пропало.

После восстановления подключения к сети Google перепрограммировала PLC, чтобы ошибка не повторилась. Компания сообщает, что внесла в электросистему europe-west-2-b ряд изменений и проверила их работу.

Дальнейшие шаги

Google поставила перед собой две задачи. Первая, «Communications Enhancement», предполагает автоматизированный механизм передачи оповещений в коммуникации, чтобы быстрее сообщать об инцидентах, затрагивающих конкретную площадку. Вторая — расширить результаты тестирования по всей платформе применительно к событиям на уровне инфраструктуры.

Приложения, на которые стоит взглянуть

SUMO: числовая головоломка

Выбирайте нужные клетки, складывайте, достигайте цели. Легко понять, сложно освоить. Бесплатно, для любого возраста.

Теги:google cloudoutagelondondatacenterplceurope-west2

Ещё за этот день

Показать все →

Ещё в рубрике: Веб и разработка

Показать все →