Britzel
Was ist ein Benchmark? Einfach erklärt
Ein Benchmark ist ein standardisierter Test, mit dem sich KI-Modelle unter gleichen Bedingungen vergleichen lassen. Alle bekommen dieselben Aufgaben, und die Trefferquote macht sie in einer Zahl vergleichbar.
Die Alltagsanalogie
Wie eine zentrale Abschlussprüfung: Alle schreiben dieselbe Klausur unter denselben Regeln, und erst die einheitliche Punktzahl macht die Ergebnisse überhaupt vergleichbar.
Im Job heißt das
Wenn ein Anbieter wirbt, sein Modell erreiche „80 % in einem Programmier-Test“, ist das ein Benchmark — eine Vergleichszahl, aber kein Garant für deinen konkreten Anwendungsfall.
Eselsbrücke
BENCHMARK ist die Note im Test, PARAMETER die Größe des Modells, TOKEN-KOSTEN der Preis pro Baustein — Zeugnis, Gewicht, Rechnung.
Stand 2026
Stand Juli 2026 ist Programmieren ein heiß umkämpfter Benchmark: SWE-Bench lässt Modelle echte Fehler in echtem Code beheben — auf der harten SWE-Bench-Pro-Variante führt Anthropics Claude Fable 5 mit rund 80 %.
Auf Englisch
benchmark, AI benchmark
A benchmark is a standardized test that allows AI models to be compared under identical conditions. All models receive the same tasks, and the score makes them comparable in a single number.