Пока прохлаждался юзер

Большая коммерческая контора. Деньги на IT выделяются с переменным успехом — то на всём экономят, то выделяют на всё подряд после крупных «залётов». Имеется серверная с горячим резервированием серверов, питания, свитчей. В шкафах по два UPS на 3–6 КВт. В подвале APC Symmetra мощностью под 100 КВт. Нагрузка строго только на серверную и админские компы. Никаких левых розеток, никакой оргтехники в нагрузке. Идиллия.

Жаркий летний день. Серверная наполняется визгом UPS в стойках. Одновременно сдыхает система кондиционирования. Symmetra зафиксировала перегрузку и штатно вырубила подачу напруги, встав в ожидание. Мы бегаем от стойки к стойке, ищем пути снижения нагрузки, вырубаем горячие резервы, бэкапы. Всё это в нарастающей жаре: 50, 55, 60… По тайм-ауту Symmetra врубается. Нагрузка снижена, всё, что осталось, вроде живёт.

Начинаем вытирать пот и переводить дух. Длится это пять минут — затем резкое увеличение нагрузки и отключение. Поиски того, что можно выключить, затем включение. Цикл повторяется пять раз. В итоге работают только основные сервера — интернета нет, почты нет. Начинаем разбираться.

В этот день закончили монтаж десятка новых кондиционеров, дабы повысить лояльность сотрудников. Подключили их, само собой, на самые новые и красивые провода и разводки. С каждым разом включить свой кондиционер удавалось успеть всё большему количеству юзеров.