Osegi
Веб и разработка·2 мин чтения

Сбой Outlook и Exchange Online: виноват июльский код Microsoft

Microsoft объяснила сбой Exchange Online и Outlook ошибкой, выпущенной в июле. Она месяцами ничем себя не выдавала, а откатить изменение было нельзя.

Rows of servers in a data center with warning lights, illustrating a large cloud email outage.
Фото: theregister

Почта Outlook на днях не работала почти сутки, и причина оказалась в изменении кода, которое Microsoft выпустила ещё в июле 2026 года. Ошибка спокойно сидела на шлюзовых серверах, пока не совпали два события.

Согласно предварительному отчёту о происшествии, опубликованному 15 ноября, обновление готовили для сетевых шлюзов Microsoft 365. Оно прошло нагрузочное тестирование и было развёрнуто без последствий. Но тесты, как признаёт компания, были ориентированы на более слабое железо с меньшим числом ядер. Дефект вызывал конкуренцию за блокировки внутри процесса Windows, из-за чего процессор и память исчерпывались. На новых машинах с большим числом ядер всё становилось ещё хуже.

Почему сбой в Exchange Online затянулся?

12 ноября в 01:07 UTC Teams переключился на «основной» шлюз, который обслуживает и Exchange Online. Нагрузка выросла. Одновременно почти 14 процентов мощности шлюза были выведены из работы. По словам Microsoft, запаса хватало, и по отдельности ни то ни другое проблемой не было. Вместе они запустили ошибку.

Дальше сработал классический каскадный отказ. Когда сервер переставал отвечать, трафик уходил на следующий исправный, и тот попадал в ту же ловушку. За два часа дефект проявился по всему парку, а в худший момент более 80 процентов серверов не отвечали. Возвращённые в строй машины тут же захлёбывались и падали снова. Штатное автоматическое восстановление не было рассчитано на такое состояние.

Teams, OneDrive, SharePoint и приложения Office смогли уйти с неисправного шлюза. Exchange Online из-за масштаба не мог.

Почему Microsoft не откатила обновление?

Просто вернуть старую версию было нельзя: дефектному изменению было уже несколько месяцев. Инженеры написали заплатку для заплатки, то есть обновление, вернувшее в Windows код к прежнему проверенному состоянию. Его применяли группами серверов, и сервис возвращался постепенно.

Первое обращение клиента поступило 12 ноября в 16:33 UTC. К 00:30 UTC 13 ноября Microsoft определила, что дело в согласовании соединений, а исправление применила в 07:20. Нормальная работа подтверждена в 16:10, последнее сообщение клиентам вышло 14 ноября в 04:15. Итоговый отчёт обещан 20 ноября.

Приложения, на которые стоит взглянуть

SUMO: числовая головоломка

Выбирайте нужные клетки, складывайте, достигайте цели. Легко понять, сложно освоить. Бесплатно, для любого возраста.

Теги:microsoftoutlookexchange onlinemicrosoft 365outageazure

Ещё за этот день

Показать все →

Ещё в рубрике: Веб и разработка

Показать все →