INTERAKTIVER BENCHMARK-VERGLEICH V2.1

Direkter Modell-Vergleich (A vs. B vs. C)

Vergleiche bis zu 3 lokale LLMs Seite an Seite über alle 10 deutschen Praxis-Disziplinen, Dual-Judge-Scores, VRAM-Anforderungen und Geschwindigkeiten.

← Zur Gesamtrangliste (62 Modelle)
BELIEBTE DUELL-PRESETS:
MODELL A · RANG #41Non-Thinking

IBM Granite 4.1-8B

Q4_K_M · GGUF · 8B Parameter
SCORE V2.177.4 / 100
Qwen-Judge: 76.5Gemma-Judge: 78.3
VRAM (inkl. 32k KV):10.4 GB (5 GB Datei)
Speed RTX 5090:204.7 Tok/s
Speed RTX 3090:~110.5 Tok/s
Vision / Multimodal:Rein Text
MODELL B · RANG #20Thinking (CoT)

Ornith 1.5-9B-Thinking

Q4_K_M · GGUF · 9B Parameter
SCORE V2.186.3 / 100
Qwen-Judge: 85.7Gemma-Judge: 87.0
VRAM (inkl. 32k KV):6.4 GB (5.4 GB Datei)
Speed RTX 5090:181.4 Tok/s
Speed RTX 3090:~98 Tok/s
Vision / Multimodal:Ja (Bild + Text)
DISZIPLINEN-DUELL (10 DEUTSCHE PRAXIS-KATEGORIEN)

Wo gewinnt welches Modell im Alltag?

Direkter Vergleich der Durchschnittswerte (0 bis 10 Punkte) pro Disziplin. Der jeweilige Spitzenreiter pro Zeile ist hervorgehoben.

Code & DebuggingPython, TypeScript, SQL & Fehleranalyse im Realprojekt
IBM Granite 4.1-8B
8.5 / 10
Ornith 1.5-9B-Thinking
8.3 / 10
Logik & DeduktionMehrstufige Schlussfolgerung, Planung & Randfälle
IBM Granite 4.1-8B
7.4 / 10
Ornith 1.5-9B-Thinking
9.6 / 10
AnweisungstreueStrikte Einhaltung komplexer Format- und Negativregeln
IBM Granite 4.1-8B
8.3 / 10
Ornith 1.5-9B-Thinking
9.8 / 10
Strukturiertes JSON / Tool-UseValide Schemata, Funktionsaufrufe & API-Payloads
IBM Granite 4.1-8B
9.7 / 10
Ornith 1.5-9B-Thinking
9.8 / 10
Daten-ExtraktionPräzises Auslesen aus Verträgen, Rechnungen & Tabellen
IBM Granite 4.1-8B
8.6 / 10
Ornith 1.5-9B-Thinking
9.9 / 10
Zusammenfassung (Deutsch)Komprimierung langer deutscher Fachtexte ohne Informationsverlust
IBM Granite 4.1-8B
9.0 / 10
Ornith 1.5-9B-Thinking
9.3 / 10
Multi-Turn-DialogKonsistenz über mehrere Rückfragen und Kurswechsel hinweg
IBM Granite 4.1-8B
8.7 / 10
Ornith 1.5-9B-Thinking
9.2 / 10
Wissensgrenze & Recht/DSGVOSaubere Abgrenzung von gesichertem Wissen vs. Spekulation
IBM Granite 4.1-8B
9.9 / 10
Ornith 1.5-9B-Thinking
9.4 / 10
Halluzinations-SicherheitErkennung erfundener Werke, Paragraphen und Falschannahmen
IBM Granite 4.1-8B
0.7 / 10
Ornith 1.5-9B-Thinking
4.9 / 10
Deutsche GeschäftskorrespondenzNatürlicher, präziser Tonfall ohne KI-Floskeln
IBM Granite 4.1-8B
6.6 / 10
Ornith 1.5-9B-Thinking
6.2 / 10