AI Ordbog
Regressionstest (AI)
En fast test, der viser, om en AI-løsning stadig gør det, den kunne før, efter en ændring af prompt, model eller data.
Skrevet og redigeret af Kristian Primdal · Sidst opdateret 23. oktober 2026Indhold
Hvad er en regressionstest?
En regressionstest er en fast test, der viser, om et system stadig gør det, det gjorde før. Regression betyder tilbagegang. Udtrykket kommer fra almindelig softwareudvikling.
I AI er behovet større end i almindelig software. Små ændringer kan give store forskelle. Det gælder en ny model fra leverandøren, en ændret prompt, et nyt værktøj eller nye data.
Regression og capability
Anthropic skelner mellem to slags evals:
| Capability eval | Regressionstest | |
|---|---|---|
| Spørgsmål | Kan løsningen det her? | Kan den stadig det her? |
| Forventet score | Lav i starten | Tæt på 100 procent |
| Formål | Bliver bedre | Opdager tilbagegang |
Når en capability eval næsten altid består, kan den flyttes over i regressionstesten. Så bliver “kan vi det?” til “kan vi det stadig?”. Kilde: Anthropic.
Sådan bygger du en
- Saml opgaver, der virker. Tag 20 til 50 rigtige opgaver, som løsningen klarer i dag.
- Skriv facit ned. Hvad er et godkendt svar? Det kan være et golden dataset.
- Vælg, hvordan der tjekkes. Med kode, en AI-dommer eller et menneske.
- Kør den ved hver ændring. Ny prompt, ny model, nyt værktøj.
- Læg nye fejl ind. Når en fejl bliver fundet og rettet, bliver den en ny opgave i testen.
Et tænkt eksempel: Et transportfirma med 70 ansatte bruger AI til at læse fragtbreve. Leverandøren skifter model. Firmaet kører sine 40 kendte fragtbreve igen. 38 går som før. To fejler, fordi den nye model læser datoer med punktum anderledes. Prompten bliver rettet, før skiftet slår igennem.
Det skal du passe på
- AI svarer forskelligt hver gang. Kør hver opgave flere gange, før du konkluderer.
- En grøn test er ikke hele sandheden. Testen dækker kun det, der står i den.
- Hold testen opdateret. Gamle opgaver kan teste noget, der ikke er relevant længere.
Kilder
Kilderne er set 23. oktober 2026.
FAQ
Hvad er en regressionstest for AI?
Et fast sæt opgaver, som AI-løsningen tidligere klarede. Du kører dem igen efter hver ændring. Falder resultatet, er noget gået i stykker.
Hvorfor skal man regressionsteste, når leverandøren opdaterer modellen?
Fordi en ny model kan være bedre generelt og stadig dårligere til netop jeres opgave. Det opdager du kun ved at køre jeres egne opgaver igen.
Hvad er forskellen på en regressionstest og en capability eval?
En capability eval spørger, om løsningen kan noget nyt. Den starter ofte med lav score. En regressionstest spørger, om den stadig kan det, den kunne. Den bør ligge tæt på 100 procent.