KI Ordbok / B
Hva er Benchmark?
En standardisert test for å måle hvor god en modell er. Eksempler er MMLU (generell kunnskap), HumanEval (koding) og MATH (matematikk). Benchmarks brukes til å sammenligne modeller, men forteller ikke alltid hvordan modellen yter i virkelig bruk.