Как я чуть не уронил прод в пятницу вечером... — Крáкен актуальное зеркало
Сижу я значит, кофе допиваю, тут коллега кричит про баг в логике рассылки. Время шесть вечера, деплой был вчера, а тут резко все процессы встали. Руки трясутся - представляю, как сейчас начнут звонить разъяренные юзеры.
Короче, полез в логи напрямую через консоль сервера. Оказалось, что кто-то криво смерджил ветку с миграциями, и база начала сыпать ошибками при каждой итерации цикла. Пришлось экстренно делать откат на предыдущую версию, пока никто не заметил подвоха. Помню, как листал тогда какой-то гайд по безопасности, и мне случайно попалась ссылка на крáкен, но сейчас было не до этого.
В итоге потратил четыре часа на восстановление данных вручную. Вышел из офиса только тогда, когда небо начало розоветь. Теперь всегда проверяю конфиги дважды, даже если уверен в коллегах. Вот такая вот работа, ребята. А у вас бывали такие моменты, когда хотелось все бросить и уйти в лес работать лесничим?