Anmelden Community öffnen →
INTERAKTIVER BENCHMARK-VERGLEICH V2.1

Direkter Modell-Vergleich (A vs. B vs. C)

Vergleiche bis zu 3 lokale LLMs Seite an Seite über alle 10 deutschen Praxis-Disziplinen, Dual-Judge-Scores, VRAM-Anforderungen und Geschwindigkeiten.

← Zur Gesamtrangliste (62 Modelle)
BELIEBTE DUELL-PRESETS:
MODELL A · RANG #40Non-Thinking

Devstral Small 2-24B

BF16 · GGUF · 24B Parameter
SCORE V2.177.6 / 100
Qwen-Judge: 77.2Gemma-Judge: 78.1
VRAM (inkl. 32k KV):47.6 GB (43.9 GB Datei)
Speed RTX 5090:33.4 Tok/s
Speed RTX 3090:~18 Tok/s
Vision / Multimodal:Rein Text
MODELL B · RANG #51Non-Thinking

Mistral Small 4-119B

Q2_K_XL · GGUF · 119B Parameter
SCORE V2.170.5 / 100
Qwen-Judge: 69.6Gemma-Judge: 71.4
VRAM (inkl. 32k KV):38.5 GB (37.4 GB Datei)
Speed RTX 5090:203.3 Tok/s
Speed RTX 3090:~109.8 Tok/s
Vision / Multimodal:Rein Text
DISZIPLINEN-DUELL (10 DEUTSCHE PRAXIS-KATEGORIEN)

Wo gewinnt welches Modell im Alltag?

Direkter Vergleich der Durchschnittswerte (0 bis 10 Punkte) pro Disziplin. Der jeweilige Spitzenreiter pro Zeile ist hervorgehoben.

Code & DebuggingPython, TypeScript, SQL & Fehleranalyse im Realprojekt
Devstral Small 2-24B
8.9 / 10
Mistral Small 4-119B
7.9 / 10
Logik & DeduktionMehrstufige Schlussfolgerung, Planung & Randfälle
Devstral Small 2-24B
8.6 / 10
Mistral Small 4-119B
8.1 / 10
AnweisungstreueStrikte Einhaltung komplexer Format- und Negativregeln
Devstral Small 2-24B
9.2 / 10
Mistral Small 4-119B
8.4 / 10
Strukturiertes JSON / Tool-UseValide Schemata, Funktionsaufrufe & API-Payloads
Devstral Small 2-24B
8.3 / 10
Mistral Small 4-119B
8.8 / 10
Daten-ExtraktionPräzises Auslesen aus Verträgen, Rechnungen & Tabellen
Devstral Small 2-24B
9.3 / 10
Mistral Small 4-119B
8.5 / 10
Zusammenfassung (Deutsch)Komprimierung langer deutscher Fachtexte ohne Informationsverlust
Devstral Small 2-24B
9.5 / 10
Mistral Small 4-119B
8.3 / 10
Multi-Turn-DialogKonsistenz über mehrere Rückfragen und Kurswechsel hinweg
Devstral Small 2-24B
9.8 / 10
Mistral Small 4-119B
9.2 / 10
Wissensgrenze & Recht/DSGVOSaubere Abgrenzung von gesichertem Wissen vs. Spekulation
Devstral Small 2-24B
6.1 / 10
Mistral Small 4-119B
4.1 / 10
Halluzinations-SicherheitErkennung erfundener Werke, Paragraphen und Falschannahmen
Devstral Small 2-24B
0.0 / 10
Mistral Small 4-119B
0.2 / 10
Deutsche GeschäftskorrespondenzNatürlicher, präziser Tonfall ohne KI-Floskeln
Devstral Small 2-24B
8.0 / 10
Mistral Small 4-119B
7.1 / 10