О сбое узнают клиенты
Сайт лежит сорок минут, пока кто-то не напишет в поддержку.
Ставлю проверки и уведомления — сообщает система.
Меня зовут Дмитрий Савичев. Делаю так, чтобы о сбое вы узнавали от системы, а не от клиентов, и чтобы выкатка не зависела от того, помнит ли кто-то порядок команд.
Работаю удалённо, один. Отвечаю обычно в тот же день.
Дмитрий Савичев
SRE/DevOps-инженер
Знакомо?
Сайт лежит сорок минут, пока кто-то не напишет в поддержку.
Ставлю проверки и уведомления — сообщает система.
Двадцать сообщений в час, и среди них теряется важное.
Развожу сигналы: один сбой — одно сообщение.
Настраивал подрядчик два года назад. Трогать страшно.
Пишу разбор того, что есть, и план — что чинить первым.
Услуги
Работа
Всё — на своей инфраструктуре, которую я веду как боевую. Чужих проектов здесь нет, и я не выдаю свои за чужие.
Состояние серверов и инциденты открываются кнопкой в чате.
Работает в production с 31 августа
Разбор
Журналы заняли 4 ГБ и продолжали расти.
4,0 ГБ → 31 МБ, ни одного перезапуска
Разбор
Наблюдатель потерял связь и объявил упавшими пять живых сайтов.
Разбор моей собственной ошибки
Разбор
После работы у заказчика остаётся отчёт: что нашёл, что сделал, чем проверил и что осталось. Вот его пример.
Напишите в двух словах, что у вас за инфраструктура и что беспокоит. Этого хватит, чтобы понять, могу ли я помочь.