← Zurück zum Leaderboard

Claude 3.5 Sonnet (Oct '24)

Anthropic

Closed-API Text-LLM
Veröffentlicht
22.10.2024
Messwerte
9

Benchmarks

Alle gespeicherten Werte, nach Themengebiet gruppiert. Das Leaderboard zeigt je Ansicht nur einen davon.

Allgemein-Wissen

Benchmark Wert Gemessen Quelle
MMLU-Pro Schwerere MMLU-Variante mit 10 Antwort-Optionen statt 4. 77.2 12.09.2026 Beleg
AA Intelligence Index Aggregat von Artificial Analysis aus 7+ Benchmarks (MMLU-Pro, GPQA, HLE, LiveCodeBench, AIME, TerminalBench-Hard, Tau2). 7.9 12.09.2026 Beleg

Reasoning / Wissenschaft

Benchmark Wert Gemessen Quelle
GPQA Diamond 198 Graduate-level Bio/Physik/Chemie-Fragen, leak-protected. 59.9 12.09.2026 Beleg
Humanity's Last Exam 2158 Multi-Domain-Fragen, eine der schwersten Suiten. 3.7 12.09.2026 Beleg

Coding / Engineering

Benchmark Wert Gemessen Quelle
LiveCodeBench Code-Generation, leak-resistent durch laufende Aktualisierung. 38.1 12.09.2026 Beleg
SciCode Wissenschafts-Codierungsaufgaben (Physik/Chemie/Bio). 36.6 04.09.2026 Beleg
AA Coding Index Aggregat aus LiveCodeBench, Tau2 und SciCode. Coding-spezifisches Pendant zum Intelligence-Index. 30.2 12.09.2026 Beleg

Mathematik

Benchmark Wert Gemessen Quelle
MATH 12 500 Wettbewerbs-Mathematik-Probleme. 77.1 12.09.2026 Beleg
AIME 2026 American Invitational Math Examination 2026. 15.7 12.09.2026 Beleg

Preise

Einheit USD Anbieter Stand Quelle
USD pro 1 Mio Input-Tokens 3,00 Artificial Analysis (median) 12.09.2026 Beleg
USD pro 1 Mio Output-Tokens 15,00 Artificial Analysis (median) 12.09.2026 Beleg

Im Magazin erwähnt