Работаю саппортом в крупной компании. Приходит заявка на сервис-деск: мол, не работает программа. Подключаюсь, запускаю софтинку, ловлю ошибку с определённым кодом. Звоню в фирму, обслуживающую этот софт. Отвечают, что нужно перезагрузить сервер, по-другому их программа работать не захочет.

Ну ладно, под конец дня ребутаю сервер. Звоню пользователю:

— Проверяйте программу.

— Ой, всё работает… А что было?

— Да ничего особенного, просто пришлось перезагрузить сервер.

— Не переживайте, научитесь.

Чего?!

Давным-давно, году в 2005-м, в некое ОАО пришла страшная железка IBM eServer BladeCenter HS20, в просторечии — «шасси глючное, центральным офисом замученное». Всё бы хорошо, но приехало оно в четыре захода в пятнадцати частях. Доблестные бухгалтеры вместо того, чтобы обозначить чудо техники в своей номенклатуре как «%имяжелезки%, часть 1» и собрать всю железку в одну кучу, назначили бедному оборудованию 15 разных номеров.

Первые глюки начались при ревизии, ибо в течение восьми лет IT-отдел задолбался объяснять бухгалтерам, как у одной железки может быть 15 инвентарников.

В 2012 году блейд пожелал сдохнуть (благо по частям, и данные спецы спасти успели). Наступил самый страшный момент: списание и замена. Уже третью неделю пытаемся объяснить бухам, что вот это шасси (13 серверов) мы в порядке модернизации меняем на два мощных сервера (со своими новыми инвентарниками), а снять с баланса службы IT им надо 15 инвентарников. Пока согласились списать 13; как уговорить списать ещё два, не представляем…

Сторонники и противники мистики в IT, я вас помирю. Ну, или по крайней мере попытаюсь.

Начнём с того, что я верующий. Определение сверхъестественного в Википедии все читали? Ага, сейчас: верующим запрещено верить в мистику. В приметы, магию, гадания… Уже интересно?

Говорите, наука всё объяснила? Хорошо, читаем на Лурке про квантовую механику.

Что же в итоге делать, если техника ведёт себя мистическим образом? Прежде всего — устранять причины любым способом. В нашей работе важна эффективность. Кому интересно, тот обязательно найдёт физическое объяснение тому или иному явлению. Но давайте искать эти объяснения после того, как работа будет сделана, ибо время — это ресурс.

Вчера я поднимал домашний сервачок под «фрёй». После установки оси решил отключить не только привод, а вообще всё лишнее. Увы, компьютер отказался заводиться без видеокарты PCI-E. Да, это можно объяснить микротрещинами, понажимать на плату и в конце концов запустить. Плюнув, оставил видео на месте.

Отключаю всё, предварительно проверив, что по SSH подключиться можно, и уношу сервер в кладовку. Там подключаю питание и сеть… Опа, а пинги не идут. Грешу на сетевой кабель. После замены третьего кабеля психанул — приволок туда же клаву и пару мониторов, которые соседка отдала на халяву. Один монитор мёртв, второй подаёт признаки жизни. Выключаю комп, цепляю клаву, включаю комп — и на мониторе появляется изображение. Сетевые кабели ни при чём. Мистики скажут, что компьютеру просто страшно было оставаться одному в тёмной кладовке. А я… Я так и не нашёл этому объяснения. И не собираюсь искать. А зачем? Ведь всё работает.

Начал работать сисадмином в интернет-магазине по рекомендации небольшого провайдера. Прошлый админ был человек странный…

Для начала он ухитрился привинтить сервер вверх ногами. Затем он от большого ума развёл провода на циске таким образом, что сигнал шёл по двум парам (ну, это понятно, до 100 Мбит/с больше не используется), но вот зачем он это сделал со всеми патч-кордами, входящими в циску, остаётся загадкой. Кроме того, перепутаны провода и идентификаторы на портах: то, что подключено в порт t17, на деле какой-нибудь m03.

Потом выяснилось, что админ не оставил пароля на админскую учётку — да вообще никаких паролей! К счастью, удалось его поймать и вытрясти хотя бы часть информации.

Компьютер, на котором оформляли почту, он принёс с собой, а старый отдал провайдеру и забыл об этом упомянуть. Пришлось в спешном порядке всех вызванивать и вытрясать оборудование.

Сейчас самое срочное уже приведено в порядок. Надеюсь, этот «добрый» человек пошёл дальше работать не в IT-сферу.

Все вы наверняка знаете такой лайфхак: если ты что-то натворил и не хочешь за это отвечать, заставь почувствовать вину за это другого причастного к ситуации.

Дело было в провинциальной конторке. Стоял там и долгие годы исправно работал компьютер с рейд-массивом «зеркало», реализованном средствами встроенного в материнскую плату контроллера. Не знаю, что там произошло, но одному из работников пришлось сбросить настройки BIOS на заводские, от чего контроллер жёстких дисков из режима рейда переключился к более привычному — совместимому с IDE. Естественно, после такого перестала загружаться и стоявшая там винда: её попытки оканчивались подвисанием анимации на бутлого и последующей перезагрузкой…

Долго пытался понять, что делать. Включил обратно рейд. Первая же перезагрузка — винда сообщает, что произошли изменения в аппаратной части, отчего она не может загрузиться и просит диск. Привода в компьютере нет. Понимаю, что если заняться делом плотно, надо волочь системник к себе на стенд — там-то у меня всё есть. Но тут проскочила мысль: «А что я, собственно, теряю?» Отстёгиваю один из винчестеров — зеркало же, на обоих одинаковая информация. Перезагружаюсь. Контроллер заявляет, что массив деградирован, но успешно загружается с одного жёсткого диска.

Проверив, что всё нормально, прямо на ходу подключаю второй винчестер, перезагружаюсь. Контроллер видит оба диска. Статус массива — Rebuild. Загрузка нормальная, после чего утилита от производителя материнской, висящая в трее, заявляет, что с массивом были проблемы, и теперь он будет пересобираться. Приказываю сотрудникам минимум пару дней не выключать компьютер, а лучше — звонить мне, если будут вопросы. Радостный, что избавил себя и людей от проблем, ухожу домой.

Вот так я заставил рейд-массив почувствовать, что в проблеме был виноват он, а не сотрудник, сбросивший настройки BIOS и разваливший массив.

Вторник после выходных, статистика системы аварий: в ауте два сервера и четыре АТС. Начинает бесноваться доменная часть сети, корпоративные приложения недоступны, ресурсы не находятся. При этом пользователи за доменом живут спокойно. Начинаются разборки в стиле «что, кто, где, когда».

Выяснилось, что задоменщики в файл хостов намертво привязали себе все необходимые ресурсы при переезде из одного домена в другой полтора года назад. В выходные сдох корневой DNS-сервер филиала (блок питания накрылся), о чём честно написал админу на старую почту (она в старом домене осталась и не переехала). Резервные DNS-сервера про ресурсы старого домена не помнят (а там много чего ещё в процессе переезда) и стали для доменных пользователей недоступны. Реинкарнированный сервер, забрав управление сетью, не смог обновить список хостов…

Уже неделю познаём дзен.

Прошлый вечер был на редкость хорош. Поставил долгожданную OS X Mavericks на свой макбук. Пока ставилась система, пил подаренный 15-летний Johnnie Walker Green Label. Читал анекдоты. Так захорошело, что одну фразу даже запостил на фейсбуке:

Самый лучший антистресс — сладкий сон и страстный секс.

Угомонился к трём ночи и заснул сладким сном в надежде на продолжение. А в семь утра упал очень-очень важный сервер, с которым я в жутком стрессе протрахался несколько часов.

Вот сижу — сонный, вымотанный. Вроде бы и сон был, и секс, но как-то не так я себе это представлял.

Сегодня был побит рекорд скорости передачи данных и ширины канала.

На меня свалилась не коробка с жёсткими дисками, как в многочисленных анекдотах и байках. Ни один здравомыслящий айтишник не станет их так хранить. На меня грохнулся чёртов серверный шкаф! Пять серверов, пять дисковых массивов, пара свитчей и роутеров. Подсчёты сделать, к сожалению, не могу, так как не помню наизусть и жду, пока мне закуют руку в гипс.

Многоуважаемые коллеги! Прошу вас: коли вы берётесь устанавливать серверные шкафы, хотя бы не смещайте центр тяжести на самый перед. Хотя бы из уважения к данным!

Проектируем SCADA-систему для строящегося завода на софте, лицензии на который стоят астрономическую сумму и будут закуплены ближе к вводу в эксплуатацию. Работаем удалённо на серваке, который специально для этого куплен. Вместе с системой он потом поедет на завод, а пока лежит в нашем кабинете.

Сервак мы выбрали надёжный. Восемь хардов, аварийная переконфигурация рейда в случае отказа харда, два камня с возможностью горячей замены, резервный блок питания. Казалось бы, всё для постоянной и непрерывной работы. И при этом каждый день я слышу фразу:

— Демо-версия кончилась, надо сервак перезапустить.

Ох, попадали бедняги-гипервизоры!

Ох, исчезли сервера из сетки офисной!

Ох, ключи забрали девочки коварные!

Ох, повыдергали технику железную!

Не учили их не дёргать на горячую,

Не учили ремеслу девчат айтишному,

А учили их железочки учитывать,

Переписывать с них циферки да буковки.

А учили их считать рубли-процентики,

А учили их вести себя с налоговой,

А учили их тому, чему айтишников

Не научишь и под дулом пистолетика.

Ты умеешь гипервизоры настраивать,

А девчата — гипервизоры подсчитывать.

Напиши, админ, на блейде номер спереди —

И не будет женский пол его выдёргивать.