Microsoft: глобальный сбой в сервисах компании произошёл из-за ошибки в конфиге, сделанной сетевыми

BladeMan

Опытный user
Регистрация
18 Май 2022
Сообщения
649
Реакции
55
bon0maz-xf_uatxzv0thiqr1ekg.jpeg

Microsoft признала, что глобальный почти пятичасовой сбой в сетевой инфраструктуре компании произошёл из-за ошибки, сделанной сетевыми инженерами, при внесении изменений в конфигурацию WAN-маршрутизаторов.

«Инцидент с отказом сервисов был вызван изменением IP-адреса WAN-маршрутизаторов с помощью команды, которая не была тщательно проверена и ведёт себя по-разному на разных сетевых устройствах», — пояснили в Microsoft.

В компании заверили, что изменения в конфигурацию маршрутизаторов вносили сетевые инженеры в рамках запланированных работ для обновления IP-адресов на WAN-маршрутизаторах. После неправильно проведённой процедуры изменения конфигурации началось каскадное отключение WAN-маршрутизаторов Microsoft от других маршрутизаторов в глобальной сети. Устройства обновили свои таблицы маршрутизации и исключили из переадресации автономные системы Microsoft, а также системы управления трафиком компании для оптимизации потоков данных в глобальной сети.

После анализа ситуации и изучения неправильной конфигурации сетевые инженеры компании вручную откатили ранее внесённые изменения. Через некоторое время они успешно восстановили работоспособность облачных сервисов Microsoft.

После этого инцидента Microsoft выпустила запрет для проведения подобных работ. Компания решила блокировать выполнение любых изменений в конфигурации сетевых устройств, которые не соответствуют рекомендациям по безопасным изменениям в конфигурации и не проверены на всём парке сетевого оборудования.
 

Willwood

Опытный user
Регистрация
13 Фев 2020
Сообщения
651
Реакции
49
Совсем скоро будет так: "глобальный сбой в сервисах компании произошёл из-за ошибки в конфиге, сгенерированном ChatGPT"
 

Aleksich

Опытный user
Регистрация
11 Сен 2021
Сообщения
730
Реакции
22
Время от времени такое будет происходить, ничего неожиданного.
 

BlackBash

Опытный user
Регистрация
12 Авг 2020
Сообщения
612
Реакции
16
Жаль не написали сколько этот сбой стоил в денежном эквиваленте.
 

Torsten

Опытный user
Регистрация
7 Ноя 2021
Сообщения
931
Реакции
112
Вот к чему может привести одна ошибка в большой компании.
 
Сверху Снизу