# Regresjonstesting

## Hva det er

Regresjonstesting undersøker om programvaren fortsetter å oppføre seg riktig etter en endring. Et
nytt eksportvalg kan oppfylle kravet til ny funksjonalitet samtidig som det endrer hvilke rader
eksisterende brukere får. En test av den nye innstillingen kan vise at den virker. En
regresjonstest går også gjennom det tidligere forløpet og ser om atferden andre avhenger av,
fortsatt holder.

Håndboken til NASA beskriver regresjonstesting som en måte å sjekke at en endring ikke har
medført nye feil. Den anbefaler blant annet å kjøre eksisterende tester knyttet til endret kode
eller krav og å undersøke moduler som virker sammen. Fremgangsmåten gjelder også ved endring av
avhengigheter, innstillinger, data eller kjøremiljø. Atferden kan endre seg selv om kildekoden er
urørt.

Bekreftelse av en rettelse og regresjonstesting utfyller hverandre. Gjenskap problemet og sjekk
at det nye resultatet er riktig. Prøv deretter nærliggende atferd som skal bevares. Behold gjerne
det første eksempelet som en vakt mot at feilen kommer tilbake. Forventet resultat skal uttrykke
hva produktet lover. Hvis en regel endres med vilje, oppdater forventningen og dokumenter
forskjellen for eksisterende brukere.

## Hvorfor det er viktig

En endring kan få virkning langt utenfor linjene som er redigert. Bytter man en liste mot en
mengde, kan rapporten miste duplikater og få en ny rekkefølge. En datofunksjon kan godta et nytt
format og samtidig avvise tomme verdier fra et annet system. Automatiske prøver kan knytte
virkningen til en fersk endring. Det er særlig verdifullt for integrasjoner som få i kodearbeidet
kjører lokalt.

Start med nærmeste felles regel og et par faktiske, forskjellige kall hvis endringen er liten.
Spør hvilke standardinnstillinger, grenseverdier, feilsituasjoner eller lagrede data som
påvirkes. For endringer med store følger kan ytelse og tilgjengelighet trenge oppmerksomhet ved
siden av de enkelte verdiene. Belegget må passe til virkningen av en oversett feil. En enhetstest
kan undersøke en omregning nøyaktig. En prøve av tastaturbetjening kan kreve en ekte nettleser
langs den virkelige brukerreisen.

Et godt navn forklarer hvorfor testtilfellet finnes. «Manglende dato forblir tom ved eksport av
eldre saker» forteller mer enn «tilfelle tre består». Vis de vesentlige inndataene og resultatet.
Da kan den neste som vedlikeholder koden, se om et krav er endret med vilje eller om noe har gått
i stykker.

## Slik ser det ut i praksis

Tenk på en CSV-eksport med et valg for å ta med arkiverte kontoer. Standardeksporten skal
fortsatt utelate dem. Aktive kontoer er sortert etter referanse, og et tomt felt for siste
kontakt skal forbli tomt. Valget legger til arkiverte kontoer uten å gjenta aktive rader. Sett to
aktive kontoer i omvendt rekkefølge og én arkivert konto i testdataene. La kontaktdatoen mangle
for én konto. Bruk den faktiske eksportøren i begge forsøk.

Sammenlign kontoreferansene, rekkefølgen og det tomme feltet ved standardeksport. Med valget på
skal aktive og arkiverte kontoer forekomme én gang hver. Ta med et navn som inneholder komma.
Hvis eksportøren bare setter sammen tekst, kan den gi riktig radantall med feil innhold i
kolonnene. Les CSV-filen med samme type leser som en virkelig mottaker. Testdataene kan være små
så lenge effekten blir synlig.

Undersøk om testene avviser en reell regresjon. La midlertidig standardeksporten ta med arkiverte
kontoer, eller fjern anførselstegnene fra navnet med komma. Den relevante testen bør feile med
forskjellige og lesbare grunner. Gjenopprett den gode utgaven og prøv igjen. En kontroll som bare
ser etter en fil, kunne sluppet begge feilene gjennom. Kjør også et gyldig tilfelle uten
arkiverte kontoer.

[Vårt notat om understreking og delsett av skrifter i
Safari](/nb/notes/safari-underline-font-subset/) viser en annen side ved bevisene. En CSS-endring
så ut til å reparere visningen i Chromium, mens Safari fortsatt trakk streken gjennom de nedre
delene av bokstavene. En regresjonstest av dette ville trenge observasjoner av nettleserne og
tilfellene den sier at den dekker. Notatet beskriver diagnosen og det som ble observert. En test
kan holde fast på den innsikten.

## Hvor det går galt

I en eksport kan også hjemmel, anonymisering og tilgang sjekkes dersom endringen berører dem. En
test der mottakeren har alle tillatelser, viser ikke hva som skjer for en ordinær konto. Velg
derfor en representativ mottaker før du stoler på at filen er riktig.

Mange tester kan gi et misvisende inntrykk av dekning. Hundre enkle kontroller kan overse den
eneste integrasjonen som leser historiske data. Velg tilfeller ut fra faktiske forløp, data og
berørte avhengigheter. Når et problem har sluppet gjennom før, beskytt det berørte forløpet og
forsikre deg om at testen avviser den gamle feilen.

Man kan også sammenligne for mange detaljer. Et fullstendig øyeblikksbilde kan forandre seg med
tilfeldige identifikatorer eller klokkeslett. Sjekk rekkefølgen der den er avtalt. Sammenlign
mengden og let etter duplikater hver for seg dersom bare utvalget er avtalt. Vurder endringer i
forventet resultat like grundig som en endring i koden.

Til sist gjør ustabile tester det vanskelig å forstå feil. Vent på en observerbar tilstand med en
frist, bruk kjente data og rydd opp etter hvert forsøk. Behold brede kontroller der virkelige
samspill teller, og la raske, avgrensede tester følge den daglige utviklingen. De gir belegg på
forskjellige nivåer.

## Les mer

- [NASAs håndbok om regresjonstesting av
  programvare](https://swehb.nasa.gov/spaces/SWEHBVC/pages/50889419/SWE-191+-+Software+Regression+Testing)
- [Dokumentasjonen til pytest om parametere i
  testtilfeller](https://docs.pytest.org/en/stable/how-to/parametrize.html)
- [Enhetstesting i Software Engineering at
  Google](https://abseil.io/resources/swe-book/html/ch12.html)

<https://engineer.company/nb/glossary/regression-testing/>
