Mistral
Alle gespeicherten Werte, nach Themengebiet gruppiert. Das Leaderboard zeigt je Ansicht nur einen davon.
| Benchmark | Wert | Gemessen | Quelle |
|---|---|---|---|
| MMLU-Pro Schwerere MMLU-Variante mit 10 Antwort-Optionen statt 4. | 76.2 | 12.09.2026 | Beleg |
| AA Intelligence Index Aggregat von Artificial Analysis aus 7+ Benchmarks (MMLU-Pro, GPQA, HLE, LiveCodeBench, AIME, TerminalBench-Hard, Tau2). | 9.4 | 12.09.2026 | Beleg |
| Benchmark | Wert | Gemessen | Quelle |
|---|---|---|---|
| GPQA Diamond 198 Graduate-level Bio/Physik/Chemie-Fragen, leak-protected. | 59.4 | 12.09.2026 | Beleg |
| LCR Long-Context-Reasoning-Benchmark (langer Kontext + Logik). | 32.3 | 12.09.2026 | Beleg |
| Humanity's Last Exam 2158 Multi-Domain-Fragen, eine der schwersten Suiten. | 3.6 | 12.09.2026 | Beleg |
| Benchmark | Wert | Gemessen | Quelle |
|---|---|---|---|
| LiveCodeBench Code-Generation, leak-resistent durch laufende Aktualisierung. | 44.8 | 12.09.2026 | Beleg |
| SciCode Wissenschafts-Codierungsaufgaben (Physik/Chemie/Bio). | 32.8 | 12.09.2026 | Beleg |
| AA Coding Index Aggregat aus LiveCodeBench, Tau2 und SciCode. Coding-spezifisches Pendant zum Intelligence-Index. | 31.3 | 12.09.2026 | Beleg |
| Benchmark | Wert | Gemessen | Quelle |
|---|---|---|---|
| IFBench Instruction-Following-Benchmark (Befolgen komplexer Vorgaben). | 38.1 | 12.09.2026 | Beleg |
| Terminal-Bench 2.1 Terminal-basierte Agent-Aufgaben, neuere Fassung neben 2.0. | 30.3 | 12.09.2026 | Beleg |
| TAU2 Tool-/Agent-Use-Benchmark Variante 2. | 24.9 | 12.09.2026 | Beleg |
| Terminal-Bench 2.0 Terminal-basierte Agent-Aufgaben (SysAdmin + Coding). | 18.9 | 12.09.2026 | Beleg |
| TAU Banking Tool-/Agent-Use im Banking-Szenario. | 10.5 | 12.09.2026 | Beleg |
| AA Agentic Index Aggregat aus GDPval-AA und Tau-Banking fuer agentische Arbeit (Werkzeugnutzung, Planung, Autonomie). Kommt vom Free-Endpoint und deckt nur einen Teil der Modelle ab. | 4.9 | 12.09.2026 | Beleg |
| Benchmark | Wert | Gemessen | Quelle |
|---|---|---|---|
| AA Math Index Aggregat aus AIME-25 und MATH-500. | 36.7 | 12.09.2026 | Beleg |
| AIME 2026 American Invitational Math Examination 2026. | 36.7 | 12.09.2026 | Beleg |