Вторник после выходных, статистика системы аварий: в ауте два сервера и четыре АТС. Начинает бесноваться доменная часть сети, корпоративные приложения недоступны, ресурсы не находятся. При этом пользователи за доменом живут спокойно. Начинаются разборки в стиле «что, кто, где, когда».

Выяснилось, что задоменщики в файл хостов намертво привязали себе все необходимые ресурсы при переезде из одного домена в другой полтора года назад. В выходные сдох корневой DNS-сервер филиала (блок питания накрылся), о чём честно написал админу на старую почту (она в старом домене осталась и не переехала). Резервные DNS-сервера про ресурсы старого домена не помнят (а там много чего ещё в процессе переезда) и стали для доменных пользователей недоступны. Реинкарнированный сервер, забрав управление сетью, не смог обновить список хостов…

Уже неделю познаём дзен.

«Расшарить за три секунды», говорите?

Поверьте, очень помогает предварительно в самый верх конфига файрвола добавить разрешительное правило до рабочего места админа и до его VPN-сервера. Тупо по всем протоколам — потом уберёте. На эти же адреса ставите статик-маршрут в сторону, куда у вас указывает шлюз по умолчанию (на случай его внезапной пропажи). Ковыряете транк между коммутаторами, меняете протоколы? Делайте это по одному порту за раз. Сделайте лишний VLAN, который не затронет такая переделка, зайдёте потом с коннектед-интерфейса. Заранее включите протоколы доступа для этого «чёрного хода».

Примета такая: «Ковырять файрвол на удалённом хосте — к поездке». И чем больше настелить соломки, тем больше вероятность, что не сбудется.

Наше предприятие производит множество разных изделий, в том числе с удалённым управлением, с жёстко зашитыми адресами. Изделий много, соответственно, адреса разные. Для маркировки закуплено много наклеек с адресами. Естественно, излишек расходится по рукам, иногда шаловливым.

Когда идёшь в туалет и видишь, что на каждой кабинке и над каждым писсуаром приклеены разные адреса, понимаешь, что в недалёком будущем возможны сообщения в корпоративной почте:

— Срочно освободите адрес такой-то, на подходе большой пакет данных!

— Переполнение стека в адресе таком-то.

Вот такой у нас сортирно-айтишный юмор.

Будучи в Японии, как-то стал участником уморительного действа. Мы интегрировали несколько систем в огромном дата-центре одного из японских провайдеров. Как-то раз, уже перед самой сдачей проекта, пришли представители заказчика проверить качество нашей работы. Но вот беда: один из представителей забыл сетевой шнур, и ему пришлось пользоваться местным, дабы подключиться к серверу. И всё бы ничего, но у шнура на «соске» была отломана защёлка. Бедный японец никак не мог совладать с постоянно вылетающим шнуром. Наконец, не выдержав, он громко поплакался на свою судьбу.

Японцы крайне непредусмотрительны, но чертовски пунктуальны. Поэтому у них всегда оборудование под расчёт и нет запасного. Соответственно, выписка нового кабеля выльется как минимум в два часа оформления документов, беготни по дата-центру, отправки курьера в магазин и прочего. Это и пояснил мне отчаявшийся японец, практически рыдая. С жестом «спокуха, братуха, где наша не пропадала» я спросил:

— У вас не найдётся спички или небольшого кусочка бумаги?

С полным недоумением коллега достал блокнот и вырвал мне листочек. Произошедшее дальше, полагаю, очевидно. Оторвав кусочек нужного размера и сложив его, я подоткнул соску патч-корда. Убедившись, что держится довольно крепко, поднял с довольным видом глаза на японца. По лицу было видно, что человек в глубочайшем шоке. Бедолага даже помыслить не мог о таком исходе и ремонте подручными средствами. Боюсь, его мир уже никогда не будет прежним.

Русские запомнились местным надолго. Трудолюбивые японцы даже просили нас работать немного поменьше, так как они уставали, но это уже совсем другая история…

Сослуживец выехал в командировку на объект. С объекта не поступала технологическая информация с половины счётчиков электроэнергии. Первое предположение: выход из строя одного из двух маршрутизаторов, подключённых к циске, которую обслуживаем не мы, а ВЦ клиента. По приезде выяснилось, что наше оборудование в порядке, работает и весело моргает индикацией, «последняя миля» от циски до наших маршрутизаторов обрывов не имеет. Значит, проблема в циске.

Начинается общение со специалистом ВЦ. Сначала приходится доказывать ему, что с нашим оборудованием нет проблем, путём переключения кабелей из неработающего порта в работающий. После этого он пытается перенастроить вторую циску в своём шкафу. Вроде успешно. В процессе перекоммутации связей выясняется, что циска старая и подстраиваться под прямой или кроссовый патч-корд не умеет и хочет видеть кросс. А проложен-то прямой. И тут специалист ВЦ выдаёт фразу:

— А разрежь кабель и скрути пары в месте разреза, чтобы кроссовый кабель получился. Хуже-то всё равно не будет!

Наш товарищ потерял дар речи.

Финал простой: специалиста ВЦ убедили нормально проверить и сконфигурировать циски на объекте без разрезаний кабеля, но вера в профессионализм специалистов отдела администрирования сетей ВЦ ощутимо пошатнулась.

Обычно здесь пишут, как косячат другие. Я же чистосердечно решил покаяться, как косячу сам.

Итак, после капремонта протянута новенькая сетка в поликлинике. Кабеля получилось в обрез, да и тянуть повторно очень не хотелось. А в одном из кабинетов при протяжке оказались перебиты три провода из восьми — пара оранжевых и один синий. И что делать в такой ситуации? Для 100 Мбит требуются только две пары — оранжевая и зелёная. Оранжевая перебита — используем для неё коричневую. Соответственно, со стороны свитча и со стороны розетки получаются этакие переходники. Но 100 Мбит поднимаются, связь есть.

Приходит новый человек. Ему надо сделать перестановку в кабинете. Он отключает все кабели, переносит в другое место и включает всё на место. Что за чёрт? Только что же всё работало? Где же сеть? Магия!

Новенький переносит комп на старое место, включает всё как было, но оно по-прежнему не работает. Он несёт новый, заводской кабель, подключает им — не работает! Но ведь работало же. Он берёт старый кабель, втыкает его снова (на этот раз правильной стороной) — работает! Он снова всё отключает, переносит на новое место… Я уж не знаю, какая была необходимость выдёргивать кабель из розетки. Может, при перестановке что-то мешало. Он втыкает этот несчастный кабель обратно — да ёшкин кот…

Рука просит тестера, а в голове вопрос: но ведь работало же? Наконец он прозванивает этот кабель между свитчем и розеткой. Видит, что три провода перебиты. Понимает, что в таком случае работать вообще ничего не должно. Но память подсказывает: работало же. И он осторожненько втыкает старый кабель. Линк есть, байтики бегут, ping весело рапортует о задержке в 2−3 мс.

Спустя неделю новенький делится этой мистикой со мной. Мне признаваться в лом, и я осторожно намекаю на неправильно обжатый оконечный кабель. Причём на неправильно обжатый с двух сторон. На следующий день новенький звонит, называет меня ясновидящим и радостно кричит, что так и есть. Ну, а как ты хотел? Ясен пень. Я ж профессионал.

Работаю в техподдержке юридических лиц. Звонят люди в возрасте и часто женского пола.

— Добрый день, у меня интернет не работает.

— У вас компьютер напрямую подключён или через какое-то дополнительное оборудование?

— (Смущённо.) У нас стоит немного неприличное оборудование. (Быстро, понизив голос.) Сиська!

Сегодня, после того, как два раза выдрали сеть, я предался фантазиям: хорошо было бы, если б сеть выглядела как железный прут, приваренный к компу! Но потом вспомнил, что была в моей жизни такая сеть. Жёсткий кабель с палец толщиной к компу подсоединялся с помощью мощного Т-образного железного коннектора. Но и уборщицы тогда ещё были мощными русскими женщинами, не дрессированными на обращение с техникой, и эти коннекторы вырывали довольно регулярно. Причём сеть тогда была не звездой, а линией — при нарушении целостности приходилось проходить все компы в поисках отошедшего контакта. Но уборщицы тоже прокачивали скиллы порчи сети. Иду, помню, я от компа к компу и обнаруживаю: коннектор-то удержался, вырвана сама сетевая плата (они тогда были не интегрированные). То есть сорвана с болтов, выдернута из слота и торчит на две трети из компа. Хорошо хоть материнка не треснула, а могла ведь, раз уборщица в состоянии развивать такие усилия.

Заглушки на крайних концах Т-образных коннекторов назывались терминаторами. Я после этого случая уборщиц тоже стал называть терминаторами. Так что хорошо ещё, что сейчас коннектор просто выскакивает, а не тянет за собой всё нутро компа.

И ещё — эти терминаторы были под не смертельным, но неприятным напряжением. Поэтому я, когда поправлял коннекторы, старался держать вторую руку подальше, чтобы ни до чего не дотронуться. Но однажды, когда наклонялся к сети, умудрился уткнуться носом в корпус компа и получил разряд.

Что ни меняется, то меняется к лучшему.

Три года назад я уволился с комбикормового завода. Три сервера, двадцать три клиента. Зарплату задерживали практически на полгода, так что я особо не сожалел. Нашёл другую работу и потихоньку стал наращивать скиллы.

Специализируюсь на FreeBSD, уважаю джейлы, да и проект IMUNES мимо меня не прошёл. Одним словом, полюбил я экспериментировать с виртуалками. А тут ещё и XenServer бесплатным стал.

Недавно я решил поработать с разными серверами. Создал три подсети. В каждой — три клиента и четыре сервера. Плюс веб-сервер, плюс три виртуалки, на которых серверы крутятся, плюс мой комп с восьмиядерным процом и 32 гигами оперативки… Одним словом, в четырёх доменах легко набирается четверть сотни хостов. Рисую я схему сети в FPinger, смотрю на это безобразие — и внезапно понимаю, что экспериментальная сеть у меня дома по мощности и сложности вполне сопоставима с локальной сетью небольшого завода…

Уже около полугода назад на этом ресурсе опубликовали мою историю «Отдых от рабочего безделья». Она продержалась в топе неделю и вызвала не менее пяти историй-ответов. А всё к чему? Дело в том, что простые истории из моего опыта и опыта моих товарищей-админов легли в основу аналога BOFH, то есть все казни египетские, которыми были покараны бухгалтеры, — чистой воды выдумка.

Но вот прошло несколько месяцев. Я нашёл себе постоянную работу — сисадмин в учебном заведении. И пользователи — люди достаточно адекватные, и железо — не динозавры из девяностых. Но всё равно у меня ощущение, что я попал в айтишный ад.

Нормальные люди организуют сеть так: в каждом компьютерном классе стоит 100-мегабитный свитч, кабинеты по этажам сочленяются свитчом гигабитным, а этажи — роутером. Логично, правда? Но нет, тут в серверную тянется пучок проводов от каждого компьютера в колледже. Неплохо, да?

В некоторых аудиториях стоят тонкие клиенты, которые соединяются с сервером для тестирования студентов. На серверах трэш, угар и содомия: два 500-гиговых жестака забиты файлами студентов (к учёбе отношения не имеют вообще), всё тормозит и глючит, вирусы скачут, несмотря на легально купленный «Касперский». А переустанавливать ось и конфигурировать сервера заново — себе дороже: всё работает на особой, айтишной магии.

Огромный зоопарк железа, осей и обилие разных сетевых настроек, а также админских учёток просто убивает. Полный список паролей администратора занимает целый лист А4 — и это без подписей, в каком кабинете какой пароль. Подбирается методом тыка.

Так вот. Хуже «глупых бухгалтеров» и «тупых юзеров» только тупые админы, ибо их «труды» разгребать всем.