Osegi
소프트웨어·2 분 소요

Microsoft 365 장애, 7월의 버그와 정기 페일오버가 원인

Microsoft는 11월 12일 Microsoft 365 장애가 몇 달간 숨어 있던 버그에 정기 페일오버와 서버 용량 감소가 겹쳐 발생했다고 설명했습니다.

Rows of servers in a dark data center with a red warning light glowing on one rack.
이미지: mint

11월 12일 전 세계에서 발생한 Microsoft 365 장애의 원인을 Microsoft가 공개했습니다. 범인은 2026년 7월부터 잠복해 있던 소프트웨어 버그로, 3개월 넘게 아무도 알아차리지 못했다고 합니다.

Copilot, Agents, Platform 담당 수석 부사장 Charles Lamanna에 따르면 세 가지 요인이 동시에 겹치면서 네트워킹 게이트웨이 서버가 응답하지 않게 됐습니다. Teams, Exchange Online, OneDrive, SharePoint, Office 앱이 영향을 받았고, 최악의 순간에는 대상 서버의 80% 이상이 먹통이었습니다.

Microsoft 365 장애 원인은 무엇이었나

첫째는 버그입니다. Microsoft 365 게이트웨이 서버용으로 준비한 코드 변경에 들어 있었고, 내부 프로세스의 락 경합(여러 작업이 같은 자원을 놓고 막히는 현상)과 관련됐습니다. 변경은 7월에 배포돼 몇 주에 걸쳐 전 세계로 퍼졌습니다. 부하 테스트가 이를 잡지 못한 이유는 테스트 환경의 트래픽 패턴과 서버 하드웨어 구성이 실제와 달랐기 때문입니다. 코어가 많은 최신 장비에서 문제가 특히 심했지만, 테스트는 주로 오래된 저사양 구성에 맞춰져 있었습니다.

둘째는 트래픽 증가입니다. 장애 약 15시간 전 Teams가 대체 게이트웨이에서 주 게이트웨이로 넘어왔고, 이 게이트웨이는 Exchange Online도 지원합니다. 이런 페일오버는 정상적인 운영의 일부지만 부하와 트래픽 패턴이 바뀌어 버그가 발동할 가능성이 커졌습니다.

셋째는 용량 감소입니다. 전날 발생한 별개 문제로 게이트웨이 서버 용량의 약 14%가 이미 빠져 있었습니다. 여유분이 있어 이것만으로는 장애가 나지 않았습니다.

왜 전 세계로 번졌고 복구는 늦어졌나

서버가 응답을 멈추자 트래픽 관리 시스템이 요청을 정상 서버로 돌렸고, 그 서버들이 같은 버그에 걸리며 연쇄적으로 무너졌습니다. 두 시간도 안 돼 게이트웨이 전반으로 번졌습니다. 별개의 문제로 용량 단위 사이의 격벽도 확산을 막지 못했습니다.

Teams, OneDrive, SharePoint, Office 앱은 우회할 수 있어 먼저 복구됐고, Teams 채팅과 회의는 대부분 정상 작동했다고 합니다. Exchange Online은 같은 방식으로 우회할 수 없었습니다.

복구도 순탄치 않았습니다. 자동 복구 시스템이 이런 광범위한 장애를 상정하지 않았고, 돌아온 서버에 밀린 요청이 몰려 다시 먹통이 되기도 했습니다. 변경이 이미 몇 달 전 전 세계에 배포돼 기존 롤백, 단계별 배포 제어, 기능 플래그로는 빠르게 되돌릴 수 없었습니다. 엔지니어들은 코드를 안정 상태로 되돌리는 업데이트를 만들어 서버 그룹을 내리고 적용한 뒤 재시작했습니다. 한 지역의 50% 이상을 한꺼번에 처리하기도 했습니다. Microsoft는 최종 사후 검토(PIR)를 이번 주 안에 내놓겠다고 밝혔습니다.

주목할 만한 앱

SUMO: 숫자 퍼즐

올바른 칸을 고르고 더해 목표 숫자를 맞추세요. 배우긴 쉽고 마스터하긴 어렵습니다. 무료, 전 연령.

태그:microsoft 365outagemicrosoftteamsexchange onlinecloud

같은 날의 다른 뉴스

전체 보기 →

관련 카테고리: 소프트웨어

전체 보기 →