Microsoft назвала причины глобального сбоя Outlook и Microsoft 365

Microsoft раскрыла причины глобального сбоя, который на прошлой неделе на сутки вывел из строя Outlook, Exchange и другие сервисы Microsoft 365 по всему миру. В предварительном отчёте, опубликованном в понедельник, компания назвала три фактора, которые привели к отказу: скрытый баг многомесячной давности, неработающие внутренние соединения и нехватка серверных мощностей. По отдельности каждый из них легко устранялся, но вместе они вызвали масштабный сбой.

Три фактора, которые сложились в один отказ

Исполнительный вице-президент Microsoft Чарльз Ламанна, отвечающий за Copilot, агентов и платформу, объяснил механику сбоя. Обычно у компании есть два сетевых шлюза — точки входа и выхода, соединяющие системы. Один из них не работал для Microsoft Teams, из-за чего основной шлюз оказался перегружен. Дополнительно более 14% серверных мощностей не работало из-за несвязанной проблемы, возникшей днём ранее.

  • скрытый (латентный) дефект в коде, появившийся ещё в июле;
  • отказ одного из двух сетевых шлюзов, перегрузивший основной;
  • снижение доступной серверной ёмкости более чем на 14%.

«Вместе возросшая нагрузка и уменьшившаяся ёмкость заставили сетевой шлюз наткнуться на латентный баг из июля. Это привело к накоплению запросов, пока серверы в итоге не перестали отвечать. Произошло это в пиковое окно трафика в США», — пояснил Ламанна.

Почему восстановление заняло так долго

Ситуацию осложнило то, что основной дефект появился несколько месяцев назад: откатить его как свежее изменение было невозможно. Кроме того, когда серверы возвращались в строй, их сразу перегружал накопившийся трафик, и они снова переставали отвечать. Автоматические процессы восстановления, по словам Ламанны, не были рассчитаны на возврат из такого широкого «неотвечающего» состояния.

Масштаб последствий

Сбой начался в четверг с перебоев в доступе к Outlook у пользователей в США, а к следующему дню распространился на миллионы людей по всему миру. По данным СМИ, тюрьмы не могли выпускать заключённых, больницы переходили на бумажные записи, школы теряли связь с родителями, а полицейские участки не могли принимать заявления. Microsoft восстановила сервисы к субботе и принесла извинения, подчеркнув, что сбой не был связан с кибератакой. Компания пообещала опубликовать финальный отчёт с дополнительными деталями.

Частые вопросы

Что стало причиной глобального сбоя Microsoft 365?

Microsoft назвала три фактора: скрытый баг в коде, появившийся ещё в июле, отказ одного из двух сетевых шлюзов и снижение серверной ёмкости более чем на 14%. Вместе они привели к перегрузке и отказу серверов.

Был ли сбой результатом кибератаки?

Нет. Microsoft отдельно подчеркнула, что сбой не связан со взломом или кибератакой.

Когда сервисы Microsoft восстановили?

Сбой начался в четверг, а к субботе Microsoft сообщила о восстановлении работы сервисов и принесла извинения пользователям.

Почему восстановление заняло несколько дней?

Основной дефект был латентным и появился за несколько месяцев до сбоя, поэтому его нельзя было быстро откатить. Кроме того, возвращавшиеся серверы сразу перегружались накопившимся трафиком и снова выходили из строя.

Источники: theguardian.com, foxbusiness.com

Рекомендованные статьи