Har reduceret driftsrisici med Grafana

Situation. Problemer blev som regel først opdaget, når de allerede havde ramt brugerne, fordi der ikke fandtes ét samlet overblik over systemernes tilstand. Uden det overblik var teamet konstant på bagkant — det reagerede på ting, der allerede var gået galt, i stedet for at se dem komme.

Opgave. Målet var at mindske driftsrisikoen ved at give teamet indblik i realtid i de systemer, det var afhængigt af.

Handling. Observability‑laget blev bygget ud: et overvågningsdashboard i Grafana og Prometheus, instrumentering af de centrale tjenester og — det, der virkelig betyder noget — metrikker med reel betydning i stedet for pyntetal, der ser travle ud, men intet fortæller. Derefter blev der sat alarmtærskler på dem, og alarmerne dukkede op dér, hvor teamet rent faktisk så dem og kunne nå at handle, mens der stadig var tid.

Resultat. Problemerne blev nu fanget og håndteret, før de eskalerede, og systemerne blev mere pålidelige. Teamet gik fra reaktiv brandslukning til en roligere og mere proaktiv drift, hvor problemerne blev fanget, mens de endnu var så små, at de var kedelige.