Знизила операційні ризики з Grafana і Prome
Знизила операційні ризики, впровадивши дашборд моніторингу на базі Grafana та Prometheus, підвищивши надійність системи.
2022 – 2024
Ситуація. Проблеми зазвичай помічали вже після того, як вони зачіпали користувачів, бо не було єдиного огляду стану систем. Без такої видимості команда постійно опинялася в обороні: реагувала на те, що вже пішло не так, замість того щоб передбачати це.
Завдання. Метою було знизити операційний ризик, давши команді змогу бачити в реальному часі стан систем, від яких вона залежала.
Дія. Розбудовано рівень спостережуваності: дашборд моніторингу на Grafana і Prometheus, інструментовані ключові сервіси і — що справді важливо — метрики, які щось означали, а не показні числа, що створюють видимість бурхливої діяльності, але нічого не кажуть. Далі для цих метрик налаштовано порогові значення сповіщень і виведено їх туди, де команда справді їх побачить і зможе діяти, поки ще є час.
Результат. Проблеми почали виявляти й усувати до того, як вони загострювалися, і надійність систем від цього зросла. Команда перейшла від реактивного гасіння пожеж до спокійнішої й завбачливішої роботи: проблеми вдавалося вловити, поки вони ще були дрібними й нудними.