Osegi
웹·개발·2 분 소요

Microsoft Outlook 장애, 원인은 7월 코드 변경

Exchange Online과 Outlook 장애는 7월에 배포한 결함 때문이라고 Microsoft가 밝혔습니다. 몇 달간 잠복했고 롤백도 불가능했습니다.

Rows of servers in a data center with warning lights, illustrating a large cloud email outage.
이미지: theregister

지난주 Microsoft Outlook 장애의 원인이 7월에 배포한 변경 사항 속 결함이었다고 Microsoft가 밝혔습니다. 11월 15일 공개한 예비 사후 보고서에 따르면 문제의 업데이트는 2026년 7월에 도입됐고, 부하 테스트를 통과했으며 배포 당시에도 영향이 없었습니다.

Outlook 장애 원인은 무엇이었나

결함은 Microsoft 365 네트워크 게이트웨이 서버에 숨어 있었습니다. 보고서는 Windows 내부 프로세스에서 락 경합이 발생해 CPU와 메모리가 고갈됐다고 설명합니다. 코어가 많은 최신 하드웨어일수록 악화되는데, 부하 테스트는 「코어 수가 적은 낮은 사양의 하드웨어」에 치우쳐 있었다고 Microsoft는 인정했습니다.

방아쇠는 두 가지가 겹친 상황이었습니다. 11월 12일 0107 UTC에 Teams가 Exchange Online을 지원하는 「기본」 게이트웨이로 장애 조치를 하면서 부하가 늘었고, 같은 시각 게이트웨이 용량의 약 14%가 복구 중이라 서비스에서 빠져 있었습니다. 각각은 문제가 아니었고 Microsoft는 용량 여유도 충분했다고 말합니다.

이후 연쇄 장애가 이어졌습니다. 서버가 멈추면 트래픽이 다음 정상 서버로 넘어가고, 그 서버도 같은 문제로 멈췄습니다. 두 시간 만에 전체로 번졌고 최악일 때는 서버의 80% 이상이 응답하지 않았습니다.

왜 롤백하지 못했나

서버를 되살려도 곧바로 과부하로 다시 멈췄습니다. 평소의 자동 복구 절차도 이런 광범위한 무응답 상태를 복구하도록 설계되지 않았습니다. 결함이 몇 달 전 것이라 단순 롤백도 불가능했습니다.

엔지니어들은 「패치의 패치」를 만들었습니다. Windows의 코드 경로를 이전의 정상 상태로 되돌리는 업데이트였고, 서버 그룹별로 적용해 서서히 복구했습니다.

Teams, OneDrive, SharePoint, Office 앱은 문제의 게이트웨이를 벗어날 수 있었지만 Exchange Online은 규모 문제로 그럴 수 없어 Outlook 장애가 길어졌습니다.

모니터는 1603 UTC에 연결 이상을 감지했고 첫 지원 요청은 1633 UTC에 들어왔습니다. 13일 0720 UTC에 완화 조치를 적용했고 1610 UTC에 정상을 확인했으며 14일 0415에 마지막 고객 안내를 냈습니다. 최종 보고서는 11월 20일 예정입니다.

주목할 만한 앱

SUMO: 숫자 퍼즐

올바른 칸을 고르고 더해 목표 숫자를 맞추세요. 배우긴 쉽고 마스터하긴 어렵습니다. 무료, 전 연령.

태그:microsoftoutlookexchange onlinemicrosoft 365outageazure

같은 날의 다른 뉴스

전체 보기 →

관련 카테고리: 웹·개발

전체 보기 →