В пятницу Microsoft работала над восстановлением доступа к Outlook, Teams и другим сервисам Microsoft 365 после сбоя, затронувшего несколько регионов и предприятия, а также государственные учреждения. Компания сообщила о признаках стабилизации ситуации по мере восстановления серверных мощностей, сообщило Associated Press . Издание The Journal сообщило о частичном восстановлении в тех областях, где Microsoft внесла корректировки, но масштабы восстановления для всех клиентов остаются неопределенными.

По данным Reuters , инцидент начался в четверг и продолжался более 12 часов . На общедоступной странице состояния Microsoft была опубликована информация о сбое, поскольку у некоторых администраторов могли возникнуть проблемы с доступом к обычному центру администрирования Microsoft 365. Это означало, что инцидент затронул как используемые пользователями сервисы, так и один из каналов, которые администраторы обычно используют для выяснения того, какие части этих сервисов не работают.

Сбои в работе обмена данными затронули не только электронную почту

В уведомлении Microsoft об инциденте, опубликованном университетом Пенсильвании, говорится, что были затронуты функции, зависящие от Exchange Online и почтовых служб. Пользователи Outlook могли испытывать трудности с доступом к своим почтовым ящикам через веб- и настольные приложения, а доставка электронной почты могла задерживаться. В уведомлении также перечислены проблемы с календарем и планированием собраний в Teams, где эти функции зависят от Exchange. Согласно уведомлению, функции, не зависящие от Exchange, продолжали работать.

Эта зависимость объясняет, почему один и тот же инцидент может проявляться по-разному на разных рабочих местах. Сотрудник может открыть приложение, но при этом не иметь возможности получить доступ к календарю или запланировать встречу. В том же уведомлении говорилось, что некоторые запросы Microsoft Graph, требующие доступа к почте, календарям или контактам, могут привести к превышению времени ожидания. В результате приложение, использующее эти запросы, может показать ошибку, даже если его собственный интерфейс доступен.

Восстановление пропускной способности потребовало нескольких шагов

Microsoft сообщила клиентам, что возвращает в эксплуатацию затронутые серверы и перенаправляет часть трафика на альтернативные маршруты. В уведомлении, опубликованном изданием Penn , говорится, что компания также применяет меры по контролю трафика в определенном месте, чтобы снизить нагрузку на затронутую инфраструктуру. Microsoft заявила, что расширит эти меры, если они покажут положительные результаты. По мере восстановления пропускной способности клиенты смогут наблюдать постепенное улучшение, а их приложения — повторное подключение.

Компания Microsoft сообщила агентству AP , что некоторые из ранее внесенных изменений не оправдали ожиданий. Агентство Reuters сообщило, что позже компания увидела признаки стабилизации и заявила, что не обнаружила никаких признаков вредоносной активности. В обновлениях статуса описывалось, как компания пытается восстановить пропускную способность. Имеющиеся уведомления не содержали полного объяснения причин начала инцидента и не указывали, когда каждый пострадавший клиент может ожидать восстановления нормального обслуживания.

Зависимые службы сообщили о собственных сбоях

Компания Anthropic заявила, что инцидент с Microsoft вызвал сбои в работе почтовых, календарных и поисковых систем, используемых ее коннектором Microsoft 365. Associated Press и The Wall Street Journal также сообщили, что OpenAI расследует проблемы с коннекторами Microsoft. Эти инструменты используют сервисы Microsoft для выполнения задач, связанных с рабочими данными. Когда зависимая почтовая или календарная служба работает медленно или недоступна, коннектор может выйти из строя, даже если помощник по-прежнему может отвечать на другие запросы.

За пределами компаний-разработчиков программного обеспечения сбой осложнил обычную работу бизнеса. Агентство Reuters сообщило о сбоях в работе некоторых финансовых компаний в Азии и проблемах с отправкой отчетов о доходах в Европе. Одна тайваньская компания отменила выкуп облигаций, а другая подтвердила сделки по факсу, сообщило Reuters. Эти примеры описывают конкретные действия пострадавших компаний. Они не содержат данных о количестве пострадавших компаний или общей стоимости сбоя.

В уведомлении Microsoft также описывались последствия для собственного пакета приложений, выходящие за рамки Outlook и Teams. У некоторых пользователей могли возникнуть проблемы с просмотром недавно использованных файлов, а также могли пострадать функции Microsoft 365 Education, такие как «Задания». В уведомлении были перечислены потенциальные проблемы с инструментом проверки ссылок в Outlook и Teams. Эти примеры иллюстрируют, почему администраторам, отреагировавшим на инцидент, пришлось проверять как доступность отдельных функций, так и базовые возможности каждого приложения.

Восстановление может различаться в зависимости от клиента и функций

Масштаб инцидента затрудняет преобразование первоначального отчета об улучшении в единое заключение об отсутствии проблем. В уведомлении Microsoft говорилось, что элементы одного и того же приложения могут иметь разные зависимости. Клиенту, у которого снова заработала электронная почта, все еще может потребоваться проверить, приходят ли обновления календаря, можно ли планировать встречи или сторонние инструменты могут получить доступ к рабочим данным. Администраторам также необходимо различать задержанные сообщения и сообщения, которые необходимо отправить повторно, поскольку в уведомлении задержки доставки описывались наряду со сбоями доступа.

Следующий этап проверки — это проверка работоспособности отдельных функций после того, как Microsoft восстановит нормальную работу серверов. Общедоступная панель мониторинга и более подробные уведомления об инцидентах предоставляют отдельные данные о восстановлении. Одна показывает, продолжается ли более масштабный сбой, а другая описывает функции, которые могут оставаться неработоспособными. Масштаб сбоя и его продолжительность могут различаться у разных клиентов, поэтому отправной точкой для оценки восстановления является общекорпоративное заявление об улучшении. Полное восстановление лучше всего достигается путем успешного использования неработающих функций и получения заключительного обновления от Microsoft.