← Zurück zum Leaderboard

DeepSeek V3.1 (Non-reasoning)

DeepSeek

Open-Weights Text-LLM
Veröffentlicht
21.08.2025
Messwerte
13

Benchmarks

Alle gespeicherten Werte, nach Themengebiet gruppiert. Das Leaderboard zeigt je Ansicht nur einen davon.

Allgemein-Wissen

Benchmark Wert Gemessen Quelle
MMLU-Pro Schwerere MMLU-Variante mit 10 Antwort-Optionen statt 4. 83.3 12.09.2026 Beleg
AA Intelligence Index Aggregat von Artificial Analysis aus 7+ Benchmarks (MMLU-Pro, GPQA, HLE, LiveCodeBench, AIME, TerminalBench-Hard, Tau2). 13.7 12.09.2026 Beleg

Reasoning / Wissenschaft

Benchmark Wert Gemessen Quelle
GPQA Diamond 198 Graduate-level Bio/Physik/Chemie-Fragen, leak-protected. 73.5 12.09.2026 Beleg
LCR Long-Context-Reasoning-Benchmark (langer Kontext + Logik). 47.0 12.09.2026 Beleg
Humanity's Last Exam 2158 Multi-Domain-Fragen, eine der schwersten Suiten. 6.7 12.09.2026 Beleg

Coding / Engineering

Benchmark Wert Gemessen Quelle
LiveCodeBench Code-Generation, leak-resistent durch laufende Aktualisierung. 57.7 12.09.2026 Beleg
SciCode Wissenschafts-Codierungsaufgaben (Physik/Chemie/Bio). 36.7 04.09.2026 Beleg
AA Coding Index Aggregat aus LiveCodeBench, Tau2 und SciCode. Coding-spezifisches Pendant zum Intelligence-Index. 28.4 19.06.2026 Beleg

Agent / Tool-Use

Benchmark Wert Gemessen Quelle
IFBench Instruction-Following-Benchmark (Befolgen komplexer Vorgaben). 37.8 12.09.2026 Beleg
TAU2 Tool-/Agent-Use-Benchmark Variante 2. 34.8 12.09.2026 Beleg
Terminal-Bench 2.0 Terminal-basierte Agent-Aufgaben (SysAdmin + Coding). 24.2 12.09.2026 Beleg

Mathematik

Benchmark Wert Gemessen Quelle
AA Math Index Aggregat aus AIME-25 und MATH-500. 49.7 12.09.2026 Beleg
AIME 2026 American Invitational Math Examination 2026. 49.7 12.09.2026 Beleg

Preise

Einheit USD Anbieter Stand Quelle
USD pro 1 Mio Input-Tokens 0,57 Artificial Analysis (median) 12.09.2026 Beleg
USD pro 1 Mio Output-Tokens 1,68 Artificial Analysis (median) 12.09.2026 Beleg