Сегодня 18 ноября 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Новости Software

Более 80 % серверов Exchange вышли из строя: Microsoft рассказала, как сама усугубила глобальный сбой Outlook

Microsoft раскрыла подробности масштабного сбоя Outlook, из-за которого сотрудники компаний, государственные учреждения и обычные пользователи почти на сутки лишились доступа к электронной почте. Проблема затронула более 80 % серверов Exchange Online и распространилась на несколько стран из-за работы механизмов аварийного переключения.

 Источник изображения: Simon Ray/Unsplash

Источник изображения: Simon Ray/Unsplash

Как сообщает The Verge, сбой начался 12 ноября около 9:00 утра. Первыми перестали отвечать серверы Exchange Online в Швейцарии, затем проблемы возникли в Мексике и других странах. Системы аварийного переключения перенаправляли почтовый трафик на другие серверы, но вместо локализации неисправности способствовали её распространению. В течение нескольких часов более 80 % серверов Exchange перестали отвечать на запросы. Microsoft присвоила инциденту высший уровень критичности Sev0 и привлекла к расследованию сотни инженеров.

Поначалу специалисты изучали журналы трассировки, аварийные отчёты и дампы ядра. Некоторые серверы переходили в режим обслуживания и переставали отвечать из-за чрезмерной нагрузки на процессор. Попытки перезапустить их не давали результата: после восстановления работы оборудование сразу получало поток накопившихся запросов и снова выходило из строя. В отдельных случаях возникал цикл перезагрузок. Дополнительные сложности создавало то, что стандартные процедуры отката изменений не позволяли вернуть серверы в работоспособное состояние.

В итоге Microsoft обнаружила скрытую ошибку в сетевой инфраструктуре Microsoft 365. Она присутствовала на серверах сетевых шлюзов с июля, но до ноябрьского инцидента никак себя не проявляла. Согласно предварительному отчёту компании, проблема была связана с конфликтом блокировок внутри одного из внутренних процессов Windows. При определённых условиях нагрузки это приводило к тому, что серверы переставали отвечать.

Обычные версии Windows не затронуты: ошибка возникла из-за исправления, подготовленного специально для сетевых шлюзов Microsoft 365. Как пояснил Чарльз Ламанна (Charles Lamanna), руководитель подразделения Copilot, Agents and Platform в Microsoft, проблема сильнее проявлялась на машинах с большим количеством ядер и новым оборудованием. При этом в испытательных лабораториях компании нагрузочные тесты преимущественно проводились на менее мощных системах с небольшим числом ядер, поэтому дефект не удалось выявить заранее.

Сбой стал результатом совпадения сразу нескольких факторов. За 15 часов до начала проблем с Outlook Microsoft Teams переключился с альтернативного сетевого шлюза на основной, обслуживающий Exchange Online. Это увеличило нагрузку на инфраструктуру и изменило характер сетевого трафика. Одновременно около 14 % мощности основного шлюза оставались недоступными из-за другой неисправности, возникшей накануне. В сочетании со скрытой ошибкой это привело к массовому отказу серверов.

Microsoft также проверила версию кибератаки, однако журналы и аварийные отчёты позволили исключить её. Для координации восстановительных работ инженеры проводили непрерывные совещания: в одном из таких звонков одновременно участвовали до 1000 человек.

На стабилизацию серверов Exchange Online ушло почти 24 часа. Microsoft признала, что штатные механизмы восстановления оказались не рассчитаны на столь масштабный отказ, а стандартные процедуры отката не помогли быстро устранить дефект, присутствовавший в инфраструктуре несколько месяцев. Компания готовит окончательный отчёт о произошедшем и обещает опубликовать его позднее.

Было интересно? Скажите об этом Google, чтобы чаще получать ссылки на наши новости про вирусы

Источник:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Материалы по теме

window-new
Soft
Hard
Тренды 🔥
В «Яндекс 360» для бизнеса появилась поддержка плагинов — они позволяют расширить возможности виртуального офиса 12 мин.
Интернет начал ломаться весь и сразу, но до киберапокалипсиса ещё далеко — и вот почему 20 мин.
Миллионы ИТ-систем по всему миру под угрозой: GPT-6 Cyber нашла критическую дыру в Java 2 ч.
Microsoft превратит Copilot в сисадмина — ИИ будет сам разбираться с поломками Windows 3 ч.
NVIDIA ускорила эмуляцию FP64-вычислений на своих ИИ-чипах 7 ч.
ИИ-генератор аудио Suno научился создавать музыкальные клипы 7 ч.
Новая глава в истории Firaxis Games началась с массовых увольнений, а следующая XCOM в беде 7 ч.
Секретная сеть АНБ США дала сбой после обновления — это парализовало работу большинства сотрудников 7 ч.
Microsoft научила Windows окирпичивать украденные ноутбуки — файлы при этом не пострадают 16 ч.
Более 80 % серверов Exchange вышли из строя: Microsoft рассказала, как сама усугубила глобальный сбой Outlook 16 ч.
Nvidia полностью прекратила поставки ИИ-чипов в Китай — даже разрешённых США Hopper 10 мин.
Американские ЦОД гиперскейл-уровня уже потребляют электроэнергию как целые штаты 29 мин.
Клея больше, чем электроники: Apple HomeView оказался настоящей катастрофой для ремонта 29 мин.
NVIDIA больше не будет продавать Китаю ускорители H200 3 ч.
Nvidia сама помогла Alibaba обойти санкции США — для этого она свела китайцев с «шпионкой» Хуанга 3 ч.
До 2 Тбайт и PCIe 4.0 x4: SSSTC представила М.2 SSD серии PQ2 для индустриальных приложений 4 ч.
2048 ядер в 2U: Giga Computing выпустила 2U4N-сервер H295-D80-CS1 с СЖО на базе AMD EPYC Venice 4 ч.
Boston Dynamics нашла новую работу для андроидов Atlas — они займутся выпуском чипов у GlobalFoundries 4 ч.
Nvidia перестанет раздувать ИИ-пузырь, без разбора закидывая неооблака деньгами 4 ч.
США перекрыли Китаю ещё одну лазейку к чипам Nvidia — азиатским дата-центрам запретили покупать ИИ-ускорители без разрешения Вашингтона 5 ч.