AI Ordbog
METR
Forskningsorganisation, der måler, hvor lange og svære opgaver AI-agenter kan løse, og hvordan AI påvirker udvikleres arbejde.
Skrevet og redigeret af Kristian Primdal · Sidst opdateret 24. oktober 2026Indhold
Hvad er METR?
METR er en amerikansk non-profit forskningsorganisation. Navnet står for Model Evaluation and Threat Research og udtales “meter”. METR beskriver sig selv som en organisation, der videnskabeligt måler, om og hvornår AI-systemer kan true samfundet med alvorlig skade.
Organisationen tester bl.a. nye modeller for AI-firmaer, før de bliver frigivet. Den er også kendt for to resultater, der bliver citeret meget.
Time horizon
METR måler, hvor lange opgaver en AI-agent kan løse. Længden måles i, hvor lang tid opgaven tager et menneske. En time horizon på 50 procent er den opgavelængde, hvor agenten lykkes i halvdelen af tilfældene.
I marts 2025 skrev METR, at denne længde var blevet fordoblet cirka hver syvende måned i seks år. METR skriver selv, at tallet bygger på data fra marts 2025 og ikke længere opdateres. Kilde: METR.
Studiet af udviklere
I juli 2025 udgav METR et studie med 16 erfarne open source-udviklere. De løste 246 rigtige opgaver, hvor det blev trukket lod om, hvorvidt de måtte bruge AI. De brugte mest Cursor med Claude 3.5 og 3.7 Sonnet.
- Før studiet regnede udviklerne med at blive 24 procent hurtigere.
- Med AI tog opgaverne 19 procent længere tid.
- Bagefter troede de stadig, at AI havde gjort dem 20 procent hurtigere.
Hvad kan en virksomhed bruge det til?
Studiet viser, at folks egen vurdering af tidsbesparelse kan ramme langt ved siden af. Det gælder ikke kun udviklere.
Et tænkt eksempel: Et firma spørger medarbejderne, hvor meget tid AI sparer dem. Svaret er i snit fem timer om ugen. Firmaet måler derefter tiden på ti faste opgaver før og efter. Besparelsen er reel, men mindre end folk troede. Det er det målte tal, der kommer i budgettet.
Kilder
Kilderne er set 24. oktober 2026.
FAQ
Hvad er METR's time horizon?
Længden af de opgaver, målt i menneskers arbejdstid, som en AI-agent kan løse med en given sandsynlighed, typisk 50 procent. I marts 2025 skrev METR, at længden var blevet fordoblet cirka hver syvende måned i seks år.
Hvad viste METR's studie af udviklere?
I 2025 løste 16 erfarne udviklere 246 opgaver med og uden AI. Med AI tog opgaverne 19 procent længere tid. Bagefter troede udviklerne, at AI havde gjort dem 20 procent hurtigere.
Betyder det, at AI gør udviklere langsommere?
Ikke generelt. Studiet gjaldt erfarne udviklere i store kodebaser, de kendte godt, med værktøjerne fra starten af 2025. Fundet, der gælder bredt, er, at folk er dårlige til at vurdere deres egen tidsbesparelse.