bash.im ithappens.me zadolba.li
11403

Тянет-потянет — вытянуть несложно

15 сентября 2013, 07:15

Сидим себе спокойно в офисе, не спеша работаем. Внезапно падает два гипервизора со всем, что на них есть. Не обратили внимания: контроллер глючный, за ним это наблюдается, саппорт в курсе, ждём апдейтов. Но через некоторое время, как по расписанию, начали отваливаться хосты, ещё и ещё…

Сначала была лёгкая паника. Потом, когда начали падать сервера с клиентским софтом, волнение выразилось исключительно громким матом.

Товарищ отправился в серверную на разведку. Через пять минут вернулся, отказался сообщать причину падения и просто начал раздавать указания по подъёму всей системы.

А ещё через пять минут до нас снизошла «причина». Оказывается, в обход всего нашего отдела решили провести инвентаризацию. Неизвестным образом ключи от серверной оказались у милых девочек, которые на живую вытаскивали блейды из корзин, переписывали серийный номер и вставляли обратно.