KI Benchmark

Wie vergleicht man KI? Typischerweise im Spannungsfeld zwischen Preis und Qualität. Zur Zeit sind die großen Datensätze - oder Large Language Models - nur mit viel Rechenaufwand performant zu durchsuchen. Und das kostet. Kleinere Modelle lassen sich aber sogar schon auf lokalen Systemen installieren. Qualität wird anhand von Fragenkatalogen beurteilt. Bspw. AIME 2024 zu Mathematik. Je nach zu beantwortender Frage lohnt es sich also, ggf. ein spezialisiertes Modell zu Fragen. Hier eine Übersicht