Банк. Том 1 - [99]

— В двух филиалах нет никого. Владивосток и Петропавловск, поздно уже было, разбежались.

— Хрен с ними. Ждем пять минут, пока остальные там с выключением телятся. Включим, подождем пять минут, чтоб проверить, что это не в тех городах. Заодно посмотрим, кто еще там чего не выключил и дадим тумаков.

Десять минут тянулись достаточно долго. Все продолжало работать, регионы, которым по аське отписали про то, кто именно очень интересуется ходом работ, вырубились абсолютно все, отъявленных мазохистов, желающих попасть на примету к председателю правления, не оказалось.

— Заводим таблицу. Владивосток, Петропавловск отмечаем галками, дальше… Дальше надо Европу включать, потому что Азия у нас спит уже. Давайте Калининград, Питер, Воронеж и пять минут ждем. По ходу… отмечайте время, когда там включились. Потом еще тройку. Будем идти на восток потихоньку.

Европа заводилась нормально и после нее вовсю двинулись в Азию. Новосибирск, Омск, Красноярск… Николай уже начал было думать о том, что это был какой-то неповторяемый и необъяснимый глюк. Такие ведь тоже бывают, как вдруг…

— ПАДАЕМ!!!

— Стоять! Регионы отрубить на хрен, перезапустить центральные маршрутизаторы, да и все остальное перезапустить тоже не повредит. Последние три региона вырубить по питанию! Кто там, Хабаровск, Благовещенск… кто еще?

— Иркутск!

— Пишите по аське, чтоб там все гасили. Остальным сказать перезапуститься.

— Перезапущенное сетевое оборудование завелось довольно быстро. После десятиминутной паузы все работало без сбоев.

— Давайте осторожно включать остальные регионы. С теми тремя потом разберемся.

— Да из остальных Якутск только один остался, сейчас включим.

Прошло еще пять минут, все было нормально.

— Так-с… Мы имеет трех потенциальных злодеев. Подцепиться к ним безопасно как-то сможете?

— Попробуем… Без рабочего VPN тяжело, мы ж их и тут на входе отрубили, чтобы в сеть не нагадили. Сейчас что-нибудь придумаем, с провайдерами поговорим… Надо, кстати, в регионы написать, чтоб поискали кабели, пусть сами подключатся, если сумеют, а мы по телефону будем спрашивать да и говорить, что им там жать.

— Какой телефон? Там же отрублено все!

— От себя им на мобилу позвоним! У нас ведь работает уже.

— И то правда…

Минут через двадцать связисты подцепились ко всем трем включенным коммутаторам. Началось внимательное изучение их конфигурации, по мониторам в окнах терминальных программ вовсю бегали вверх-вниз белые, желтые или зеленые строки, в зависимости от склонности хозяина к разным цветам.

— ТВОЮ Ж МАТЬ!!!

Ростецкий и IT-директор, как по команде, рванулись к голосившему и уставились на монитор.

— Да… Это ж сколько лет он с этим спящим неправильно выставленным параметром работал?

— Четыре с большим хреном.

— Стопудово, что подключавший тогда заметил не то, дал местным по рукам, подправил, но рабочую конфигурацию в стартовую забыл скопировать. Вот после перезапуска почти через пять лет и прилетело…

— Еще как прилетело…

— Так — раздался голос председателя. Проблему, я так понял, нашли.

— Именно.

— Николай, доложишь мне позже, сейчас нечего народ грузить. Остальные… Кто в состоянии из коммуникаторов дежурить — посмотрите и решите сами, на месте остальных освободившихся я бы немедленно выпил водки. Разрешаю прямо здесь, сейчас секретарше звякну. Да и мне бы самому, кстати, совсем не помешало… Физиономии у Вас всех выглядят чрезвычайно «не очень».

Минут через пять совершенно обалдевшая секретарша притащила две бутылки Абсолюта и дюжину рюмок на подносе.

— За меня уже можно пить, не чокаясь — раздался голос IT-директора.

— Да и за меня тоже… — произнес начальник отдела телекоммуникаций.

— Успокойтесь! Пьем чокаясь и за то, чтоб такое не повторилось. Я сказал!

После такого решительного указания все было сделано именно так, как сказано.

Глава 35

На следующий день Николай Старостенко зашел на доклад к председателя правления. Он практически на 100 % был уверен, что доклад окажется совершенно необычным и понял, что не ошибся, услыхав вопрос председателя

— Что вчера было-то? Рассказывай!

— Такого и нарочно не придумаешь. Восстановили картину произошедшего и поняли, что там случилось…

— Говори!

— Началось все чуть позже двенадцати часов, когда в сети взялся то ли вирус, то ли просто проскочил пакет данных неверного формата, от которого некоторые сервера баз данных начали забивать сеть левыми пакетами. Так как каналы связи забились, сеть легла намертво. Минут 15 потратили на то, чтобы разобраться в том, кто в сеть гадит, сервера те вообще выключили, и решили, чтобы быстрее запуститься, перезагрузить все сетевое оборудование. Коммутаторы (или как их по-английски называют, свитчи), ведь пока протолкают все загадившие сеть левые данные в регионы по медленным каналам… Все оборудование перезапустили и началась история почти на пять часов.

— Вот эта история мне особо интересна! Виноват-то кто?

— Для начала, что именно было. Сейчас попробую попроще рассказать, не знаю получится ли, спрашивайте, если что. Все свитчи cisco в сети имеют свой приоритет, который задается параметром spanning tree, его и не перевести. Благовещенск — наш первый филиал, на нем все отлаживали. Свитч крутили не только наши и, скорее всего, местные автоматизаторы тоже туда руку приложили, а у них, как и у всех айтишников, правило работы с незнакомыми параметрами простое — если не знаешь, что какой параметр делает, ставь его значение в ноль. Беда оказалась в том, что этот самый ноль означает то, что коммутатор самый главный. Вот и получилось, что вся сеть банка пыталась работать через канал в 128 килобит и пролезть к главному коммутатору в Благовещенск. Не получалось, естественно, ничего путного, и все висло.