AI Ordbog
Rubric
En liste over de konkrete krav, et AI-svar skal opfylde for at blive godkendt. Bruges af både mennesker og AI-dommere.
Skrevet og redigeret af Kristian Primdal · Sidst opdateret 23. oktober 2026Indhold
Hvad er en rubric?
En rubric er en bedømmelsesliste. Den beskriver de konkrete krav, et svar skal opfylde for at være godt nok. Ordet kommer fra undervisning, hvor lærere bruger rubrics til at give karakter efter faste kriterier.
I AI-evaluering bruges rubrics til at bedømme svar ensartet. Både mennesker og AI-dommere kan bruge den samme liste. Anthropic nævner rubrics som en af de typiske måder, en AI-dommer giver point på. Kilde: Anthropic.
Et eksempel på en rubric
En tænkt rubric til svar på reklamationer i en webshop:
| Krav | Bestået, hvis |
|---|---|
| Svarer på det, kunden spurgte om | Kundens spørgsmål er besvaret direkte |
| Korrekt ordrenummer | Ordrenummeret passer med sagen |
| Ingen løfter uden dækning | Der loves ikke rabat eller retur ud over politikken |
| Næste skridt | Kunden ved, hvad der sker nu |
| Tone | Høflig og uden undskyldninger i flæng |
Et svar består kun, hvis alle krav er opfyldt. Eller I vægter dem og sætter en grænse.
Ja/nej eller karakterer?
Hamel Husain og Shreya Shankar anbefaler bestået/ikke bestået frem for en skala fra 1 til 5. Det tvinger bedømmeren til at tage stilling. To bedømmere bliver også oftere enige. Kilde: Husain og Shankar.
En skala kan bruges, men så skal hvert trin beskrives. Hvad er forskellen på 3 og 4? Kan ingen svare, er skalaen for løs.
Sådan skriver du en god rubric
- Start med rigtige fejl. Læs svar igennem, og skriv ned, hvad der går galt. Kravene skal komme derfra.
- Gør hvert krav målbart. “Svaret er godt” er ikke et krav. “Svaret nævner leveringsdatoen” er.
- Test den på mennesker først. Lad to kolleger bedømme de samme 20 svar. Er de uenige, skal kravet skrives om.
- Brug den så i en AI-dommer. Sammenlign dommerens bedømmelser med kollegernes.
Det skal du passe på
- For mange krav. Lange lister giver tilfældige vurderinger. Hold dem korte.
- Krav uden facit. Kan kravet ikke afgøres ud fra svaret, giver det støj.
- Rubricen bliver gammel. Opdater den, når produkter, priser eller politikker ændrer sig.
Kilder
Kilderne er set 23. oktober 2026.
FAQ
Hvad er en rubric i AI-evaluering?
En liste over de krav, et godt svar skal opfylde. Fx 'nævner leveringsdatoen' eller 'lover ikke rabat'. Bedømmeren, menneske eller AI, går listen igennem for hvert svar.
Skal en rubric bruge karakterer eller ja/nej?
Mange anbefaler ja/nej pr. krav. Hamel Husain og Shreya Shankar skriver, at bestået/ikke bestået tvinger til klarere beslutninger og giver mere ensartede vurderinger end en skala fra 1 til 5.
Hvor mange krav skal en rubric have?
Så få som muligt. Start med de tre til fem ting, der oftest går galt i jeres egne sager. Hvert krav skal kunne afgøres uden at gætte.