마이크로소프트($MSFT)의 마이크로소프트 365(Microsoft 365)에서 12일 여러 서비스의 네트워크 게이트웨이가 전 세계적으로 중단됐다. 회사는 잠복 결함과 게이트웨이 부하 증가, 서버 용량 감소가 함께 작용했다고 설명했다.
찰스 라마나(Charles Lamanna) 마이크로소프트 코파일럿·에이전트·플랫폼 담당 수석부사장은 장애가 고객의 정상적인 업무와 운영에 영향을 준 데 대해 사과했다. 자세한 내용은 마이크로소프트 365 관리자 센터에서 확인할 수 있다고 안내했다.
첫 번째 요인은 특정 부하 조건에서 서버를 응답 불능 상태로 만드는 잠복 결함이다. 마이크로소프트는 서버 내부 프로세스들이 같은 자원을 사용하려다 경합해 시스템을 이용할 수 없게 됐다고 설명했다.
이 결함은 네트워크 게이트웨이 서버 전용 수정 과정에서 생겼다. 마이크로소프트는 해당 결함과 수정 사항 모두 일반적인 윈도 배포에는 적용되지 않는다고 밝혔다.
문제가 된 변경은 7월부터 전 세계 서버에 배포됐다. 수 주에 걸친 배포 중에는 이상이 관찰되지 않았고, 전 세계 적용이 끝난 뒤에도 3개월 넘게 영향이 나타나지 않았다.
두 번째 요인은 게이트웨이 부하 상승으로, 잠복 결함이 드러날 가능성을 높였다. 마이크로소프트는 서비스 격리와 고가용성을 위해 서로 독립적이고 구조가 다른 네트워크 게이트웨이 시스템 두 개를 운영하며, 한쪽에 장애가 나면 다른 쪽으로 서비스를 전환하는 절차는 표준 복원력 조치라고 설명했다.
세 번째 요인은 게이트웨이 서버 용량의 약 14%가 장애 전날 발생한 별개 문제로 서비스에서 빠져 있던 점이다. 해당 용량은 정기 유지보수와 상태 점검 절차를 거쳐 복귀할 예정이었다.
마이크로소프트는 충분한 여유 용량이 있어 서버 용량 감소만으로는 서비스에 영향이 없었다고 밝혔다. 부하 증가와 용량 감소가 겹치면서 7월 도입된 잠복 결함이 드러났다는 설명이다.
앞서 본지는 장애 공지에 21개 서비스·제품 항목이 영향 대상으로 열거된 사실을 전했다. 또 일부 서버 중단 뒤 남은 서버에 과부하가 걸렸다는 설명을 다뤘으며, 이번 설명은 게이트웨이 중단에 작용한 세 조건을 구체화했다.
<Copyright ⓒ TokenPost, unauthorized reproduction and redistribution prohibited>
Most Popular