AI Ordbog
Stikprøver (kontrol af AI)
Tilfældigt udvalgte sager, som et menneske tjekker, mens en AI-løsning er i drift.
Skrevet og redigeret af Kristian Primdal · Sidst opdateret 24. oktober 2026Indhold
Hvad er stikprøver?
En stikprøve er en sag, der bliver valgt tilfældigt og tjekket af et menneske. Når en AI-løsning er i drift, tager I et fast antal hver uge. Den, der tjekker, går sagen igennem, som om AI ikke havde været med. Er svaret rigtigt? Ville de have gjort det samme?
Det er ikke det samme som human-in-the-loop, hvor et menneske godkender hver sag. Stikprøver bruges, når løsningen har fået lov at køre selv.
Hvorfor de er nødvendige
AI laver fejl, der ser rigtige ud. Ingen opdager dem, fordi ingen kigger. Stikprøver er den måde, I opdager dem på.
De giver også et tal. Hvor mange af stikprøverne var rigtige? Det tal kan I sammenligne med jeres baseline og følge over tid. Det viser, hvis en ny model eller en ændret proces gør tingene værre.
Sådan gør I
- Vælg tilfældigt. Ellers tager folk dem, der ser mærkelige ud.
- Tag et fast antal. Fx fem sager om ugen. Flere, hvor fejl koster meget.
- Skriv resultatet ned. På samme ark som baseline.
- Brug fejlene. Hver fejl bliver en ny sag i jeres golden dataset.
- Aftal en grænse. Falder andelen af rigtige svar under den, får løsningen mindre frihed.
Et tænkt eksempel
Et vikarbureau bruger AI til at sende bekræftelser på vagter. Hver mandag trækker en planlægger fem tilfældige bekræftelser fra ugen før. I uge syv er én forkert: tidspunktet er fra en gammel vagt. Fejlen bliver lagt i facit, og instruktionen bliver rettet. Ugen efter er alle fem rigtige.
Stikprøver tager tid. Den tid skal med i regnestykket fra start, så gevinsten ikke ser større ud, end den er.
FAQ
Hvor mange stikprøver skal vi tage?
Et fast antal, der passer til mængden og risikoen. Fx fem sager om ugen for en proces med et par hundrede sager. Der, hvor en fejl koster meget, tager I flere.
Hvorfor skal stikprøverne vælges tilfældigt?
Fordi folk ellers vælger de sager, der ser mærkelige ud. Så ser I aldrig de fejl, der ser rigtige ud, og det er dem, AI laver.
Hvad gør vi, når en stikprøve viser en fejl?
Skriv den ned. Læg sagen i jeres facit, så den bliver testet næste gang. Falder andelen af rigtige svar under den grænse, I har aftalt, får løsningen mindre frihed, indtil den holder igen.