Welche Hardware für Qwen3.5 397B A17B?

Qwen3.5 397B A17B braucht mit der Variante Q8_0 rund 430,9 GB Speicher und läuft auf keinem der 891 geführten Geräte flüssig.

Sortiert nach dem kleinsten Speicher, der reicht, bei gleichem Speicher nach Tempo. Grafikkarten sind ohne Auslagerung in den Arbeitsspeicher gerechnet. Die Tempowerte sind berechnet, nicht auf dem Gerät gemessen, und an veröffentlichten und eigenen Messungen abgeglichen. Ausgenommen sind die mit * markierten Werte: sie sind nicht abgeglichen und deshalb unsicher.

Geräte

Grafikkarten, in die es ganz passt