Muse Glimmer 30B

Dieses Modell ist aus seiner Modellkarte automatisch übernommen und von uns noch nicht gegengelesen; Größen, Kontext und Lizenz sind gemessen, die Einordnung nicht.

Muse Glimmer 30B braucht mit der Variante Q5_K_M rund 27,1 GB Speicher und läuft auf 131 von 544 geführten Geräten flüssig.

Mit dem wenigsten Speicher schafft es: Apple MacBook Pro 14 Zoll (2026), M5 Max mit 40-Kern-GPU, 48 GB.

Berechnet für 4.096 Token Kontext (Anwendungsfall „Ausprobieren, Neugier“). Die Tempowerte sind an veröffentlichten und eigenen Messungen abgeglichen, aber nicht auf diesem Gerät gemessen.

Wofür möchten Sie das Modell nutzen?
Mehr zu diesem Einsatzzweck: Modelle und Geräte nach Preis
Anbieter
meta-models
Parameter
27,9 Mrd.
Längster Kontext
131.072 Token
Nimmt entgegen
Text und Bilder
Lizenz
Apache 2.0

So starten Sie es mit Ollama:

$ ollama run hf.co/unsloth/Muse-Glimmer-30B-GGUF:UD-Q5_K_M
>>> /set parameter num_ctx 4096

Ab 24 GB Grafikspeicher wählt Ollama von selbst mehr Kontext und braucht dann mehr Speicher; beim Mac zählt dabei der Teil des Arbeitsspeichers, den macOS der Grafik zuteilt. Die zweite Zeile, nach dem Start in Ollama eingegeben, hält den Kontext bei den 4.096 Token, für die die Zahlen hier gelten.

Geräte, auf denen es flüssig läuft

Die Tempowerte sind berechnet, nicht auf dem Gerät gemessen, und an veröffentlichten und eigenen Messungen abgeglichen. Ausgenommen sind die mit * markierten Werte: sie sind nicht abgeglichen und deshalb unsicher.

GerätUrteilTempoSpeicher
Apple MacBook Pro 14 Zoll (2026), M5 Max mit 40-Kern-GPU, 48 GBLäuft gut15 bis 20 Token/s48 GB
davon 36,0 GB nutzbar
Apple MacBook Pro 16 Zoll (2026), M5 Max mit 40-Kern-GPU, 48 GBLäuft gut15 bis 20 Token/s48 GB
davon 36,0 GB nutzbar
Apple Mac Studio (2026), M5 Max mit 40-Kern-GPU, 48 GBLäuft gut15 bis 20 Token/s48 GB
davon 36,0 GB nutzbar
Apple MacBook Pro 14 Zoll (2024), M4 Max mit 40-Kern-GPU, 48 GBLäuft gut14 bis 19 Token/s48 GB
davon 36,0 GB nutzbar
Apple MacBook Pro 16 Zoll (2024), M4 Max mit 40-Kern-GPU, 48 GBLäuft gut14 bis 19 Token/s48 GB
davon 36,0 GB nutzbar
Apple Mac Studio (2025), M4 Max mit 40-Kern-GPU, 48 GBLäuft gut14 bis 19 Token/s48 GB
davon 36,0 GB nutzbar
Apple MacBook Pro 14 Zoll (2023), M3 Max mit 40-Kern-GPU, 48 GBLäuft gut11 bis 15 Token/s48 GB
davon 36,0 GB nutzbar
Apple MacBook Pro 16 Zoll (2023), M3 Max mit 40-Kern-GPU, 48 GBLäuft gut11 bis 15 Token/s48 GB
davon 36,0 GB nutzbar
Apple MacBook Pro 14 Zoll (2026), M5 Pro mit 16-Kern-GPU, 48 GBLäuft gut9,0 bis 12 Token/s48 GB
davon 36,0 GB nutzbar
Apple MacBook Pro 14 Zoll (2026), M5 Pro mit 20-Kern-GPU, 48 GBLäuft gut9,0 bis 12 Token/s48 GB
davon 36,0 GB nutzbar

und 121 weitere

Grafikkarten, in die es ganz passt

GrafikkarteUrteilTempoSpeicher
NVIDIA GeForce RTX 5090, 32 GBLäuft gut51 bis 62 Token/s32 GB
davon 31,2 GB nutzbar
NVIDIA RTX PRO 4500 Blackwell, 32 GBLäuft gut28 bis 34 Token/s32 GB
davon 31,2 GB nutzbar
AMD Radeon AI PRO R9700, 32 GBLäuft gut16 bis 30 Token/s32 GB
davon 31,2 GB nutzbar
AMD Radeon PRO W7800, 32 GBLäuft gut15 bis 28 Token/s32 GB
davon 31,2 GB nutzbar
NVIDIA RTX 5000 Ada Generation, 32 GBLäuft gut19 bis 23 Token/s32 GB
davon 31,2 GB nutzbar
NVIDIA RTX PRO 5000 Blackwell, 48 GBLäuft gut40 bis 49 Token/s48 GB
davon 47,2 GB nutzbar
NVIDIA RTX 6000 Ada Generation, 48 GBLäuft gut30 bis 36 Token/s48 GB
davon 47,2 GB nutzbar
AMD Radeon PRO W7900, 48 GBLäuft gut21 bis 40 Token/s48 GB
davon 47,2 GB nutzbar
NVIDIA RTX A6000, 48 GBLäuft gut24 bis 30 Token/s48 GB
davon 47,2 GB nutzbar
NVIDIA RTX PRO 6000 Blackwell, 96 GBLäuft gut51 bis 62 Token/s96 GB
davon 95,2 GB nutzbar

Alle Geräte und Grafikkarten für Muse Glimmer 30B

Varianten

Der Bedarf gilt für 4.096 Token Kontext. Dabei bleibt Ollama, wenn Sie nach dem Start „/set parameter num_ctx 4096“ eingeben.

VarianteDateiSpeicherbedarfStartbefehl
Q5_K_M19,2 GB27,1 GBollama run hf.co/unsloth/Muse-Glimmer-30B-GGUF:UD-Q5_K_M
Q8_029,6 GB35,9 GBollama run hf.co/unsloth/Muse-Glimmer-30B-GGUF:Q8_0
BF1655,7 GB60,5 GBIn mehrere Dateien aufgeteilt, mit Ollama nicht direkt startbar.

Quelle: https://huggingface.co/unsloth/Muse-Glimmer-30B-GGUF

Weitere Ratgeber