{"canonical_url":"https://engineer.company/nb/glossary/alert/","content_markdown":"# Driftsvarsel\n\n## Hva det er\n\nEt driftsvarsel er et automatisk signal om at en betingelse som overvåkes, har holdt seg sann lenge\nnok til at det er verdt å forstyrre noen. I daglig tale heter det bare varsel eller alarm, og et\nvarsel som er alvorlig nok til å vekke den som har vakt, kaller mange en page, etter personsøkeren\ndet en gang gikk til.\n\nOrdet dekker to ulike ting, og Prometheus holder dem fra hverandre på en måte som gjør skillet lett\nå se. En varslingsregel (alerting rule) i Prometheus lager varsler: ett for hvert unike sett med\netiketter som uttrykket gir et resultat for. Varslene går videre til et eget program, Alertmanager,\nsom gjør dem om til meldinger: en e-post, en chatmelding, et kall til en vakttjeneste. Prosjektet\nsier rett ut at varslingsregler alene er langt fra et fullstendig varslingssystem. Skillet betyr noe\nfordi tallene sprer seg. Femti varsler kan komme fram som én melding, ett varsel kan gi en\npåminnelse med noen timers mellomrom, og et dempet varsel når fram til ingen i det hele tatt, mens\ndet fortsatt står i firing.\n\nLivsløpet er kort. Så lenge uttrykket returnerer tomt, er varselet inactive. Første gang det gir et\nresultat, blir varselet pending, og der blir det stående så lenge regelens `for`-ledd krever. Er\nbetingelsen fortsatt sann når ventetiden er ute, går varselet over i firing og sendes videre for\nlevering. Når betingelsen slutter å være sann, blir varselet resolved. Et nyere ledd,\n`keep_firing_for`, holder et varsel i firing en stund etter at betingelsen er borte, og\ndokumentasjonen beskriver det som et vern mot flapping og falske meldinger om at problemet er løst. Prometheus lagrer\ndessuten tilstandene pending og firing som en tidsserie kalt `ALERTS`, så du kan kjøre spørringer\nmot selve varslene og tegne dem i grafer.\n\nEn regel som venter tjue minutter før den går av, og ti minutter til før den slipper, ser slik ut:\n\n```yaml\ngroups:\n    - name: exports\n      rules:\n          - alert: ExportQueueStalled\n            expr: exports_waiting \u003e 0 and rate(exports_done_total[15m]) == 0\n            for: 20m\n            keep_firing_for: 10m\n            labels:\n                severity: page\n                team: billing\n            annotations:\n                summary: \"{{ $value }} exports queued and none finishing\"\n```\n\nEtiketter (labels) og annotasjoner ligner på hverandre, men gjør ulike jobber. Etikettene er en del\nav det som gjør et varsel til akkurat dette varselet og ikke et annet, og Alertmanager leser dem for\nå avgjøre hvor det skal: `severity: page` kan gå til en telefon, mens `severity: ticket` havner i en\nsakskø. Annotasjonene bærer ordene en person trenger når meldingen kommer: en sammendragslinje, en\nlengre beskrivelse, en lenke til runbooken som sier hva som skal gjøres først. Annotasjoner kan\nbygges med maler som setter inn varselets etiketter og verdien som utløste det, og det er derfor\nsammendraget over kan sitere et tall.\n\nDriftsvarsel og driftshendelse er to ord av en grunn. Et varsel melder at en betingelse holdt seg\nsann. Om betingelsen utgjør en driftshendelse, er en vurdering et menneske må gjøre.\n\n## Hvorfor det er viktig\n\nAv alt overvåkingen produserer, er varselet det eneste som oppsøker deg av seg selv. Metrikker\nligger i lagringen, et dashbord venter på en skjerm og en logg venter på et søk, mens et varsel\ntrenger seg inn i noens kveld. Det gjør hver varslingsregel til et lite, stående krav på en persons\noppmerksomhet, og kravet er bare rimelig hvis personen kan gjøre noe med det. Prometheus-prosjektets\negne råd om varsling sier det slik: unngå å tilkalle noen når det ikke finnes noe å gjøre, og hold\nvarslingen enkel.\n\nDen andre grunnen er regning. Én årsak utløser som regel mange regler samtidig. Når en\nnettverkspartisjon skiller halvparten av en tjenestes instanser fra databasen, kan hver instans\nsende sitt eget varsel, og dokumentasjonen til Alertmanager bruker nettopp det tilfellet til å vise\nhundrevis av varsler som blir til én melding. Alertmanager samler varsler som deler etikettene som\ner nevnt i `group_by`, og venter `group_wait` (30 sekunder som standard) så den første meldingen\nrommer hele puljen. Deretter sender den oppdateringer for gruppen høyst hvert `group_interval` (5\nminutter), og gjentar en melding som fortsatt er i firing, etter `repeat_interval` (4 timer).\nUndertrykking (inhibition) går et steg lenger og holder noen varsler tilbake mens et annet er i\nfiring, så et varsel om at en hel klynge er utilgjengelig, kan stilne varslene fra hver tjeneste\ninni den. Dempinger (silences) gjør varsler som matcher et sett etiketter, stumme i en fast periode,\ntypisk under planlagt vedlikehold.\n\nDen tredje grunnen er slutten på historien. De fleste mottakere sender en melding om at varselet er\nresolved når det går over, men e-postmottakerens innstilling `send_resolved` står som standard til\nfalse. Et team som varsler på e-post, kan dermed se problemet meldt og aldri få vite at det tok\nslutt.\n\n## Slik ser det ut i praksis\n\nSelskapets egen vert bruker en alarm som reagerer på et manglende signal. De 464 MB med minne betjener en webserver og en forge, og minnemangel og en full disk er to viktige feilrisikoer. [En timer på verten pinger en ekstern tjeneste bare så lenge terskelkontrollene for tilgjengelig minne og ledig diskplass består](/nb/portfolio/built-dead-mans-switch-host-monitoring/), hvert femtende minutt med litt jitter, og den eksterne tjenesten slår alarm når de forventede pingene uteblir. Feil som hindrer skriptet i å kjøre eller nå tjenesten, blant annet et tapt nettverk eller en mislykket oppstart, gir et manglende ping. Et mottatt signal bekrefter at skriptet kjørte, og at terskelkontrollene for tilgjengelig minne og ledig diskplass ble bestått; det dokumenterer ikke vertens generelle tilstand eller at nettstedet svarer. Overvåking kan avdekke varselsignaler, men tidspunktet avhenger av belastningen og forholdene som observeres.\n\nDen samme omvendingen kan beskytte planlagte jobber. I\n[backupimplementeringen har sikkerhetskopiering og gjenoppretting hvert sitt suksessignal](/nb/portfolio/backups-that-have-actually-been-restored/).\nSkriptene og systemd-enhetene støtter krypterte øyeblikksbilder utenfor verten,\nintegritetskontroller og en månedlig test som gjenoppretter en kjent fil; et suksessignal sendes\nførst når den aktuelle arbeidsflyten lykkes. Det er utformingen av varslingsveien, ikke bevis\nfor at den var aktiv. Implementasjonsregistreringen datert 2026-10-27 sier at tidsurene var\ndeaktivert uten et konfigurert lager, og dokumenterer ingen fullført gjenoppretting under reelle\ndriftsforhold. Stillhet kan utløse et eksternt varsel når arbeidsflyten og overvåkingen\ner aktivert; konfigurasjonen alene viser ikke at de kjører.\n\nOmvendte varsler har en egen feiltilstand, og den dukket opp da plattformen skulle vokse fra én vert\ntil to. Å la begge vertene dele én dødmannsknapp ville ha\n[svekket nettopp den varslingen den skulle utvide](/nb/portfolio/split-every-operational-secret-per-host/):\nså lenge én av vertene fortsetter å pinge, holder sjekken seg grønn mens den andre er død. Hver\nknapp ble en verdi per vert, og knappene til den eksisterende verten ble med vilje stående tomme. Da\nsier konfigurasjonen at koblingen finnes, og at verdien fortsatt må fylles inn.\n\n## Hvor det går galt\n\n**En målt verdi havner i en etikett.** Fordi etikettene identifiserer et varsel, gjør en etikett med\ndet aktuelle tallet hver endring av tallet til et nytt varsel, og det forrige blir resolved.\nMottakeren ser en strøm av par med firing og resolved for ett og samme problem. Bruk etiketter til\nidentitet og ruting, og legg tall i annotasjonene.\n\n**Varselet flapper.** En betingelse som svever rundt terskelen, går av, blir resolved og går av\nigjen med noen minutters mellomrom, og hver melding om at det er over, forteller leseren noe som er\nusant. Gjør `for` lengre så et blipp forsvinner før noen hører om det, og bruk `keep_firing_for` så\nvarselet holder seg i firing gjennom en kort dukkert under terskelen.\n\n**En demping lever lenger enn grunnen til den.** Noen demper et varsel for vedlikehold med en bred\nmatcher og en romslig sluttid, og neste ukes ekte feil kommer inn dempet. Gjør dempingen så smal som\narbeidet tillater, gi den en sluttid nær det tidspunktet arbeidet skal være ferdig, og skriv hvem\nsom satte den og hvorfor i kommentarfeltet Alertmanager har til det.\n\n**En bred rute sluker de spesifikke.** Alertmanager går gjennom rutingtreet i rekkefølge og stopper\nved det første barnet som matcher, med mindre ruten setter `continue: true`. En oppsamlingsrute\nplassert over et teams egen rute tar med seg det teamets varsler. Legg de smaleste rutene først, og\ntest treet med eksempeletiketter før du stoler på det.\n\n**Alt haster.** Disk på 70 %, et sertifikat som går ut neste måned, og en betalingstjeneste som\nreturnerer feil, tilkaller alle den samme telefonen, og snart blir telefonen ignorert. Tilkall bare\nfor betingelser en person må handle på nå, send resten til en sakskø eller et daglig sammendrag, og\nslett en regel som har gått av i månedsvis uten at noen har gjort noe med den.\n\n## Les mer\n\n- [Alerting overview](https://prometheus.io/docs/alerting/latest/overview/)\n  — hvordan varslingsreglene i Prometheus og Alertmanager deler arbeidet, og stegene for å sette opp\n  begge.\n- [Alerting rules](https://prometheus.io/docs/prometheus/latest/configuration/alerting_rules/)\n  — regelsyntaksen, med `for`, `keep_firing_for`, etiketter, annotasjoner og maler.\n- [Alertmanager](https://prometheus.io/docs/alerting/latest/alertmanager/)\n  — gruppering, undertrykking, dempinger og drift av flere Alertmanager-instanser for høy\n  tilgjengelighet.\n- [Alertmanager configuration](https://prometheus.io/docs/alerting/latest/configuration/)\n  — rutingtreet, grupperingstidene, undertrykkingsreglene og innstillingene for hver mottaker, bl.a.\n  `send_resolved`.\n- [Alerting practices](https://prometheus.io/docs/practices/alerting/)\n  — prosjektets egne råd om hva som fortjener å tilkalle noen, og hva som hører hjemme et annet\n  sted.\n\n\u003chttps://engineer.company/nb/glossary/alert/\u003e\n","date_modified":"2026-11-12T05:34:23Z","description":"For deg som setter opp varsling: livsløpet til et driftsvarsel i Prometheus, etiketter mot annotasjoner, og alarmen som går av når en vert tier.","formats":{"gemtext":"https://engineer.company/nb/glossary/alert/index.gmi","gopher":"https://engineer.company/nb/glossary/alert/gophermap","html":"https://engineer.company/nb/glossary/alert/","json":"https://engineer.company/nb/glossary/alert/index.json","markdown":"https://engineer.company/nb/glossary/alert/index.md","pdf":"https://engineer.company/nb/glossary/alert/index.pdf"},"kind":"page","language":"nb","title":"Hva er et driftsvarsel?","url":"https://engineer.company/nb/glossary/alert/","version":1}