Anthropic
Anthropics Flaggschiff, führend bei Code-Refactoring und Reasoning.
Alle gespeicherten Werte, nach Themengebiet gruppiert. Das Leaderboard zeigt je Ansicht nur einen davon.
| Benchmark | Wert | Gemessen | Quelle |
|---|---|---|---|
| MMLU 57 Faecher Multiple-Choice. Saturiert (Top alle ~88-90). | 90.2 | — | Beleg |
| AA Intelligence Index Aggregat von Artificial Analysis aus 7+ Benchmarks (MMLU-Pro, GPQA, HLE, LiveCodeBench, AIME, TerminalBench-Hard, Tau2). | 40.7 | 12.09.2026 | Beleg |
| Benchmark | Wert | Gemessen | Quelle |
|---|---|---|---|
| GPQA Diamond 198 Graduate-level Bio/Physik/Chemie-Fragen, leak-protected. | 91.4 | 12.09.2026 | Beleg |
| LCR Long-Context-Reasoning-Benchmark (langer Kontext + Logik). | 78.7 | 12.09.2026 | Beleg |
| Humanity's Last Exam 2158 Multi-Domain-Fragen, eine der schwersten Suiten. | 42.3 | 12.09.2026 | Beleg |
| Benchmark | Wert | Gemessen | Quelle |
|---|---|---|---|
| AA Coding Index Aggregat aus LiveCodeBench, Tau2 und SciCode. Coding-spezifisches Pendant zum Intelligence-Index. | 73.6 | 12.09.2026 | Beleg |
| SWE-Bench Verified Echte GitHub-Issues fixen (1699 verifizierte Tasks). | 71.5 | — | Beleg |
| SciCode Wissenschafts-Codierungsaufgaben (Physik/Chemie/Bio). | 54.5 | 04.09.2026 | Beleg |
| Benchmark | Wert | Gemessen | Quelle |
|---|---|---|---|
| TAU2 Tool-/Agent-Use-Benchmark Variante 2. | 88.6 | 12.09.2026 | Beleg |
| Terminal-Bench 2.1 Terminal-basierte Agent-Aufgaben, neuere Fassung neben 2.0. | 83.1 | 12.09.2026 | Beleg |
| IFBench Instruction-Following-Benchmark (Befolgen komplexer Vorgaben). | 58.6 | 12.09.2026 | Beleg |
| Terminal-Bench 2.0 Terminal-basierte Agent-Aufgaben (SysAdmin + Coding). | 51.5 | 12.09.2026 | Beleg |
| TAU Banking Tool-/Agent-Use im Banking-Szenario. | 34.6 | 12.09.2026 | Beleg |
| Einheit | USD | Anbieter | Stand | Quelle |
|---|---|---|---|---|
| USD pro 1 Mio Input-Tokens | 5,00 | Artificial Analysis (median) | 12.09.2026 | Beleg |
| USD pro 1 Mio Input-Tokens | 5,00 | (initial YAML) | 23.04.2026 | Beleg |
| USD pro 1 Mio Output-Tokens | 25,00 | Artificial Analysis (median) | 12.09.2026 | Beleg |
| USD pro 1 Mio Output-Tokens | 25,00 | (initial YAML) | 23.04.2026 | Beleg |