INTERAKTIVER BENCHMARK-VERGLEICH V2.1

Direkter Modell-Vergleich (A vs. B vs. C)

Vergleiche bis zu 3 lokale LLMs Seite an Seite über alle 10 deutschen Praxis-Disziplinen, Dual-Judge-Scores, VRAM-Anforderungen und Geschwindigkeiten.

← Zur Gesamtrangliste (62 Modelle)
BELIEBTE DUELL-PRESETS:
MODELL A · RANG #40Non-Thinking

Devstral Small 2-24B

BF16 · GGUF · 24B Parameter
SCORE V2.177.6 / 100
Qwen-Judge: 77.2Gemma-Judge: 78.1
VRAM (inkl. 32k KV):47.6 GB (43.9 GB Datei)
Speed RTX 5090:33.4 Tok/s
Speed RTX 3090:~18 Tok/s
Vision / Multimodal:Rein Text
MODELL B · RANG #45Thinking (CoT)

Magistral Small 2509 (24B)

BF16 · GGUF · 27B Parameter
SCORE V2.176.0 / 100
Qwen-Judge: 75.4Gemma-Judge: 76.6
VRAM (inkl. 32k KV):48.5 GB (43.9 GB Datei)
Speed RTX 5090:33.5 Tok/s
Speed RTX 3090:~18.1 Tok/s
Vision / Multimodal:Rein Text
DISZIPLINEN-DUELL (10 DEUTSCHE PRAXIS-KATEGORIEN)

Wo gewinnt welches Modell im Alltag?

Direkter Vergleich der Durchschnittswerte (0 bis 10 Punkte) pro Disziplin. Der jeweilige Spitzenreiter pro Zeile ist hervorgehoben.

Code & DebuggingPython, TypeScript, SQL & Fehleranalyse im Realprojekt
Devstral Small 2-24B
8.9 / 10
Magistral Small 2509 (24B)
8.8 / 10
Logik & DeduktionMehrstufige Schlussfolgerung, Planung & Randfälle
Devstral Small 2-24B
8.6 / 10
Magistral Small 2509 (24B)
8.3 / 10
AnweisungstreueStrikte Einhaltung komplexer Format- und Negativregeln
Devstral Small 2-24B
9.2 / 10
Magistral Small 2509 (24B)
8.9 / 10
Strukturiertes JSON / Tool-UseValide Schemata, Funktionsaufrufe & API-Payloads
Devstral Small 2-24B
8.3 / 10
Magistral Small 2509 (24B)
8.5 / 10
Daten-ExtraktionPräzises Auslesen aus Verträgen, Rechnungen & Tabellen
Devstral Small 2-24B
9.3 / 10
Magistral Small 2509 (24B)
9.2 / 10
Zusammenfassung (Deutsch)Komprimierung langer deutscher Fachtexte ohne Informationsverlust
Devstral Small 2-24B
9.5 / 10
Magistral Small 2509 (24B)
9.5 / 10
Multi-Turn-DialogKonsistenz über mehrere Rückfragen und Kurswechsel hinweg
Devstral Small 2-24B
9.8 / 10
Magistral Small 2509 (24B)
9.3 / 10
Wissensgrenze & Recht/DSGVOSaubere Abgrenzung von gesichertem Wissen vs. Spekulation
Devstral Small 2-24B
6.1 / 10
Magistral Small 2509 (24B)
5.7 / 10
Halluzinations-SicherheitErkennung erfundener Werke, Paragraphen und Falschannahmen
Devstral Small 2-24B
0.0 / 10
Magistral Small 2509 (24B)
0.6 / 10
Deutsche GeschäftskorrespondenzNatürlicher, präziser Tonfall ohne KI-Floskeln
Devstral Small 2-24B
8.0 / 10
Magistral Small 2509 (24B)
7.8 / 10