Помните, я недавно писал про дата-центры и устойчивость? Так вот, вселенная прочитала пост и решила устроить наглядную демонстрацию. За одну неделю у нас случился глобальный сбой Microsoft, остановка всех рейсов в США и падение секретной сети АНБ. И нет, это не хакеры и не ИИ. Всё гораздо смешнее и страшнее.
С 12 по 14 ноября мир почти на сутки потерял Outlook, Teams, SharePoint и Copilot. Глобально, во всех регионах. Почта не уходила, встречи не собирались, и даже страница статуса Microsoft периодически лежала вместе со всеми, что в этой ситуации выглядит уже как перформанс. Разбор причин, который потом опубликовал исполнительный вице-президент компании Чарльз Ламанна, это маленький шедевр жанра «как не надо». Сошлись три фактора. Первый: скрытый дефект в сетевых шлюзах, который тихо жил в коде с июля и ждал своего часа. Второй: изменение распределения трафика, которое повысило нагрузку. Третий: плановое обслуживание, срезавшее ёмкость парка на 14%. На пике не отвечали более 80% серверов сетевого шлюза. А автоматический откат не сработал, потому что проблемное изменение выкатили четыре месяца назад, откатывать было нечего. И самая ирония недели: всё это случилось через два дня после ноябрьского Patch Tuesday, в котором Microsoft закрыла 1094 уязвимости.
В пятницу, 13 ноября, FAA (американское Федеральное управление гражданской авиации) объявила полную остановку взлётов по всей территории США из-за сбоя устаревшей системы. Задержано больше десяти тысяч рейсов. Официально: никакой кибератаки, просто старое железо.
17 ноября легла NSANet, засекреченная сеть Агентства национальной безопасности. Тоже, по предварительным данным, не атака, а последствия плановых обновлений. Чиновники поспешили заверить Конгресс: все эти сбои это «рутинное обслуживание и патчи, а не кибератаки».
Знаете, от такого успокоения мне как-то тревожнее, чем от кибератаки. Законодателей оно, впрочем, тоже не успокоило: в Конгрессе уже предложили двухпартийный законопроект о создании специального совета по расследованию крупных цифровых сбоев.
Главная угроза вашей инфраструктуры сидит не в тёмной сети с монитором в капюшоне. Она сидит в задаче «обновить конфигурацию в четверг вечером». Три независимых гиганта упали за неделю сами, без чьей-либо помощи. Проверяйте откаты, репетируйте деградацию и никогда не деплойте в пятницу тринадцатого. Это уже даже не шутка, это статистика.