Microsoft признаёт, что исправления не устранили глобальный сбой Outlook, Teams и других сервисов 365

Microsoft сообщила, что недавние исправления серверов не принесли ожидаемого облегчения глобальному сбою, затронувшему набор Microsoft 365, включая Outlook, Teams, Word, Excel, PowerPoint, SharePoint, OneDrive и ИИ-ассистента Copilot. Сервис Down Detector зафиксировал почти 130 000 сообщений пользователей о проблемах доступа, многие из которых не могли отправлять или получать электронную почту или загружать почтовые ящики.

Компания заявила, что расследует сообщения о пользователях, сталкивающихся с проблемами доступа к почтовым ящикам Exchange Online через различные методы подключения. Позже она выявила часть своей инфраструктуры, испытывающую повышенную нагрузку, вероятно способствующую ошибкам соединения, после того как несколько серверов неожиданно стали недоступны во время автоматических проверок состояния.

В 21:00 UTC в четверг Microsoft проверила альтернативный метод проверки состояния на подмножестве затронутых серверов, позволив им вернуться в работу, и начала более широкое применение исправления. Был также подготовлен автоматический процесс обнаружения и перезапуска неотвечающих серверов, и отмечено, что недавние обновления конфигурации могли способствовать проблеме.

К 21:41 UTC компания перезапускала и проверяла затронутые серверы и оценивала, может ли откат небольшого количества недавних изменений конфигурации ускорить восстановление. Однако в 22:11 UTC она заявила, что принятые меры пока не принесли ожидаемого облегчения и что основной процесс на затронутых серверах начинает перегружаться.

Microsoft сообщила, что изолирует части своей сервисной инфраструктуры, перезапускает затронутые компоненты и постепенно вводит трафик, чтобы подтвердить стабильность перед более широким применением. Также она указала, что анализирует шаблоны трафика по всей инфраструктуре и оценивает региональную изоляцию, позволяя затронутым регионам восстанавливаться независимо.

Ранее на сайте Microsoft было опубликовано предупреждение, что фирма «агрессивно ищет все пути снижения воздействия» и приостановила развертывания и изменения конфигурации, пока проверяет недавние обновления на предмет связи с инцидентом.

Марк Грегори, доцент Университета RMIT, описал сбой как проблему сетевого уровня, похожую на инцидент Optus 2023 года, отмечая, что неправильно сконфигурированные серверы заставляют клиентов использовать меньший пул ресурсов, что приводит к перегрузке и каскадному сбою. Он посоветовал компаниям инвестировать в тестовые среды для изменений конфигурации и поддерживать резервные варианты облачных сервисов.

OpenAI и Anthropic подтвердили, что сбой затронул коннектор Microsoft 365, используемый ChatGPT и Claude AI. Microsoft также заявила, что восстановила функциональность Teams в Северной Америке, хотя некоторые пользователи продолжают сталкиваться с проблемами подключения.