По данным Downdetector, в США число сообщений о проблемах с Outlook в пиковый момент достигло примерно 138 тысяч. Reuters сообщает, что перебои затронули государственные учреждения, компании и образовательные организации. При этом Microsoft не смогла быстро восстановить работоспособность серверов: часть из них после перезапуска снова переставала отвечать на запросы.

Известно, что проблема возникла в инфраструктуре Exchange Online, которая обеспечивает работу электронной почты, календарей и ряда других сервисов Microsoft 365. Из-за этого последствия распространились на приложения, которые зависят от этой инфраструктуры.

Первый сбой был зафиксирован в Microsoft Teams в Северной и Южной Америке. Пользователи сталкивались с задержками и невозможностью отправлять сообщения, создавать и обновлять беседы, получать историю чатов.

Причиной, согласно объяснению компании, стала конкуренция за ресурсы внутри инфраструктуры, вызвавшая повышенную загрузку и помешавшая обработке запросов. Спустя некоторое время проблема перестала рассматриваться исключительно как неисправность почты, и компания заявила о нарушениях в работе нескольких сервисов своей экосистемы.

Несмотря на все предпринимаемые меры, уже вечером в четверг компания признала, что усилия не дали ожидаемого результата. Microsoft стала искать альтернативные способы увеличения пропускной способности инфраструктуры и восстановления сервисов. По последним доступным сообщениям, полное восстановление еще не было подтверждено.

По мере распространения сбоев сообщения стали поступать из США, Канады, стран Латинской Америки, Австралии, Индии, Японии, Сингапура и других государств. В Австралии и Сингапуре проблема затронула не только частные компании, но и государственные структуры. При этом Microsoft сообщала, что потенциально пострадать могли пользователи в любом регионе, а не только в первоначально обозначенной Америке. Особенно показательными стали случаи, когда сбой нарушил работу государственных органов и крупных организаций.

Проблемы затронули пользователей Палаты представителей Конгресса США и затруднили обычную деятельность сотрудников. По сообщениям Reuters, среди пострадавших оказались Австралийская служба безопасности и разведки, а также федеральная полиция.

Кроме того, проблемы затронули государственные и образовательные структуры. В частности, представители властей Северной территории Австралии сообщали о нарушениях работы школьных технологических систем. В Сингапуре государственное агентство GovTech подтвердило, что некоторые государственные системы страны пострадали от сбоя Microsoft.

Американский производитель электрических грузовиков Workhorse Group перенес публикацию финансовых результатов за третий квартал, сославшись на нарушения деловой деятельности из-за глобального сбоя Microsoft.

OpenAI сообщила о проблемах с подключением к Microsoft 365 через интеграционные инструменты. Нарушения затронули соединения, позволяющие использовать рабочую информацию из корпоративных систем Microsoft. В частности, речь идет о доступе к почте, календарям и другим данным, которые могут использоваться при работе с ChatGPT.

Разработчик Claude также сообщил о проблемах. Компания объяснила их неисправностью у стороннего поставщика инфраструктурных услуг, то есть Microsoft 365. Сами ChatGPT и Claude при этом не перестали работать. Речь шла о нарушениях интеграций с Microsoft 365, а не о полном отказе обеих нейросетей.

Microsoft пока не дала окончательного ответа о причинах сбоя. Но специалисты выяснили, что проблема не была вызвана внезапным увеличением общего числа запросов пользователей. Напротив, большое количество серверов неожиданно перестало отвечать. В результате оставшиеся машины получили повышенную нагрузку и также начали испытывать проблемы.

Впоследствии Microsoft обнаружила, что затронутые серверы не проходили автоматические проверки состояния (health checks). Эти проверки необходимы для определения того, способен ли сервер нормально обрабатывать запросы. Когда система фиксировала сбой, серверы становились недоступными для обслуживания пользователей. Инженеры обнаружили проблему в компоненте, который отвечал за обработку таких проверок.

В последующих обновлениях Microsoft сообщила, что процесс, отвечающий за установление безопасных соединений на затронутых серверах, перегружался. Из-за этого серверы прекращали обработку запросов.

Также было обнаружено недавнее изменение сетевых настроек, которое по времени совпало с началом инцидента. Компания приступила к откату этого изменения, чтобы проверить, поможет ли возвращение прежней конфигурации восстановить работоспособность.

Несмотря на эти достаточно странные события, предшествовавшие аварии, компания пока публично не рассматривает кибератаку как причину сбоя.