INTERAKTIVER BENCHMARK-VERGLEICH V2.1

Direkter Modell-Vergleich (A vs. B vs. C)

Vergleiche bis zu 3 lokale LLMs Seite an Seite über alle 10 deutschen Praxis-Disziplinen, Dual-Judge-Scores, VRAM-Anforderungen und Geschwindigkeiten.

← Zur Gesamtrangliste (62 Modelle)
BELIEBTE DUELL-PRESETS:
MODELL A · RANG #60Non-Thinking

Mistral 7B v0.3

Q4_K_M · GGUF · 7B Parameter
SCORE V2.157.1 / 100
Qwen-Judge: 56.1Gemma-Judge: 58.0
VRAM (inkl. 32k KV):8.7 GB (4.1 GB Datei)
Speed RTX 5090:253.8 Tok/s
Speed RTX 3090:~137.1 Tok/s
Vision / Multimodal:Rein Text
MODELL B · RANG #21Non-Thinking

Gemma 4-12B-QAT

UNKNOWN · GGUF · 12B Parameter
SCORE V2.186.2 / 100
Qwen-Judge: 85.8Gemma-Judge: 86.5
VRAM (inkl. 32k KV):9.4 GB (6.5 GB Datei)
Speed RTX 5090:153.2 Tok/s
Speed RTX 3090:~82.7 Tok/s
Vision / Multimodal:Ja (Bild + Text)
DISZIPLINEN-DUELL (10 DEUTSCHE PRAXIS-KATEGORIEN)

Wo gewinnt welches Modell im Alltag?

Direkter Vergleich der Durchschnittswerte (0 bis 10 Punkte) pro Disziplin. Der jeweilige Spitzenreiter pro Zeile ist hervorgehoben.

Code & DebuggingPython, TypeScript, SQL & Fehleranalyse im Realprojekt
Mistral 7B v0.3
4.9 / 10
Gemma 4-12B-QAT
9.0 / 10
Logik & DeduktionMehrstufige Schlussfolgerung, Planung & Randfälle
Mistral 7B v0.3
2.8 / 10
Gemma 4-12B-QAT
9.4 / 10
AnweisungstreueStrikte Einhaltung komplexer Format- und Negativregeln
Mistral 7B v0.3
6.9 / 10
Gemma 4-12B-QAT
9.0 / 10
Strukturiertes JSON / Tool-UseValide Schemata, Funktionsaufrufe & API-Payloads
Mistral 7B v0.3
9.2 / 10
Gemma 4-12B-QAT
9.7 / 10
Daten-ExtraktionPräzises Auslesen aus Verträgen, Rechnungen & Tabellen
Mistral 7B v0.3
8.1 / 10
Gemma 4-12B-QAT
9.8 / 10
Zusammenfassung (Deutsch)Komprimierung langer deutscher Fachtexte ohne Informationsverlust
Mistral 7B v0.3
8.4 / 10
Gemma 4-12B-QAT
9.5 / 10
Multi-Turn-DialogKonsistenz über mehrere Rückfragen und Kurswechsel hinweg
Mistral 7B v0.3
7.0 / 10
Gemma 4-12B-QAT
9.7 / 10
Wissensgrenze & Recht/DSGVOSaubere Abgrenzung von gesichertem Wissen vs. Spekulation
Mistral 7B v0.3
4.8 / 10
Gemma 4-12B-QAT
8.0 / 10
Halluzinations-SicherheitErkennung erfundener Werke, Paragraphen und Falschannahmen
Mistral 7B v0.3
0.0 / 10
Gemma 4-12B-QAT
4.4 / 10
Deutsche GeschäftskorrespondenzNatürlicher, präziser Tonfall ohne KI-Floskeln
Mistral 7B v0.3
5.0 / 10
Gemma 4-12B-QAT
7.6 / 10