Apple MacBook Pro 16 Zoll (2023), M2 Pro mit 19-Kern-GPU, 16 GB

Ja. Auf diesem Gerät läuft Qwen3 14B flüssig, mit rund 14 bis 19 Token pro Sekunde.

Berechnet für 4.096 Token Kontext (Anwendungsfall „Ausprobieren, Neugier“). Die Tempowerte sind an veröffentlichten Messungen abgeglichen, aber nicht auf diesem Gerät gemessen.

Wofür möchten Sie das Gerät nutzen?

Größtes Modell, das flüssig läuft

Qwen3 14B

Q4_K_M · 14 bis 19 Token/s

So starten Sie es mit Ollama:

$ ollama run hf.co/Qwen/Qwen3-14B-GGUF:Q4_K_M

Schnellstes Modell

LFM2.5 8B A1B

Q4_K_M · 60 bis 88 Token/s

Das schnellste unter den flüssig laufenden Modellen mit mindestens halb so vielen Parametern wie das größte.

So starten Sie es mit Ollama:

$ ollama run hf.co/LiquidAI/LFM2.5-8B-A1B-GGUF:Q4_K_M

Modelle auf diesem Gerät

Alle Tempowerte sind berechnet und an veröffentlichten Messungen abgeglichen, nicht auf dem Gerät gemessen. Mit * markierte Werte sind nicht abgeglichen und deshalb unsicher.

ModellUrteilTempoSpeicher
Qwen3 14B
Q4_K_M
Läuft gut14 bis 19 Token/s10,7 von 10,7 GB
Ministral 3 14B
Q4_K_M
Läuft gut15 bis 20 Token/s9,9 von 10,7 GB
Gemma 4 12B
Q4_0
Läuft gut17 bis 24 Token/s8,3 von 10,7 GB
Ornith 1.5 9B
Q4_K_M
Läuft gut22 bis 30 Token/s6,9 von 10,7 GB
Qwen3.5 9B
Q4_K_M
Läuft gut22 bis 31 Token/s6,7 von 10,7 GB
Qwen3 8B
Q4_K_M
Läuft gut24 bis 33 Token/s6,5 von 10,7 GB
Llama 3.1 8B
Q4_K_M
Läuft gut25 bis 34 Token/s6,4 von 10,7 GB
Gemma 4 E4B
Q4_0
Läuft gut27 bis 38 Token/s5,6 von 10,7 GB
Gemma 4 E2B
Q4_K_M
Läuft gut41 bis 57 Token/s4,0 von 10,7 GB
Qwen3.5 4B
Q4_K_M
Läuft gut46 bis 63 Token/s3,7 von 10,7 GB
Qwen3 4B
Q4_K_M
Läuft gut46 bis 64 Token/s4,0 von 10,7 GB
LFM2.5 8B A1B
Q4_K_M
Der Speicher für den Kontext ist geschätzt.
Läuft gut60 bis 88 Token/s6,9 von 10,7 GB
LFM2.5 2.6B
Q4_K_M
Der Speicher für den Kontext ist geschätzt.
Läuft gut71 bis 98 Token/s2,8 von 10,7 GB
gpt-oss 20B
Q4_K_M
Läuft nicht12,8 von 10,7 GB
Mistral Small 3.2 24B
Q4_K_M
Läuft nicht16,1 von 10,7 GB
Qwen3.8 27B
Q4_K_M
Läuft nicht17,9 von 10,7 GB
Qwen3.6 27B
Q4_K_M
Läuft nicht18,2 von 10,7 GB
Gemma 4 26B A4B
Q4_K_M
Läuft nicht18,4 von 10,7 GB
Granite 4.2 30B
Q4_K_M
Läuft nicht20,0 von 10,7 GB
Qwen3 30B A3B 2507
Q4_K_M
Läuft nicht20,1 von 10,7 GB
Qwen3-Coder 30B A3B
Q4_K_M
Läuft nicht20,1 von 10,7 GB
Gemma 4 31B
Q4_K_M
Läuft nicht20,7 von 10,7 GB
Ornith 1.5 35B A3B
Q4_K_M
Läuft nicht23,0 von 10,7 GB
Qwen3.6 35B A3B
Q4_K_M
Läuft nicht23,5 von 10,7 GB
Llama 3.3 70B
Q4_K_M
Läuft nicht45,5 von 10,7 GB
gpt-oss 120B
Q4_K_M
Läuft nicht65,0 von 10,7 GB
Qwen3.5 122B A10B
Q4_K_M
Läuft nicht79,0 von 10,7 GB
Laguna S 2.1
Q4_K_M
Der Speicher für den Kontext ist geschätzt.
Läuft nicht110,8 von 10,7 GB
Ornith 1.5 397B
Q4_K_M
Läuft nicht250,1 von 10,7 GB
GLM-5.3 Flash
Q8_0
Der Speicher für den Kontext ist geschätzt.
Läuft nicht381,5 von 10,7 GB
GLM-5.3
Q8_0
Der Speicher für den Kontext ist geschätzt.
Läuft nicht895,4 von 10,7 GB

Gerätedaten

Chip
M2 Pro, 19-Kern-GPU
Arbeitsspeicher
16 GB
Davon für Modelle nutzbar
10,7 GB
Speicherbandbreite
200 GB/s
Rechenschnittstelle
Metal