Zum Inhalt

Qwen3.8 Flash Next

MoEVision

QwenQwen · 180B (6B aktiv) · Mixture of Experts

Qwen3.8 Flash Next ist ein 180B-Modell von Qwen mit 256K Token Kontext. In Q4_K_M mit 8K Kontext braucht es etwa 111,9 GB; mit 141 GB bleibt Luft für lange Chats.

Hugging Face GGUF

Mixture of Experts

Parameter: 180B · Aktiv: 6B

Alle 180B Parameter liegen im Speicher, aber nur 6B arbeiten pro Token – es läuft also so schnell wie ein viel kleineres Modell.

Quantisierungsoptionen

Quant.SpeicherAuf deiner Hardware
Q2_K—…
Q3_K_M—…
Q4_K_M—…
Q5_K_M—…
Q6_K—…
Q8_0—…
F16—…

Speicher nach Kontextlänge

In Q4_K_M. Der Kontext-Cache wächst mit jedem Token, das das Modell im Blick behält.

KontextKontext-CacheGesamt
4K0,1 GB111,8 GB
8K0,2 GB111,9 GB
32K0,8 GB112,4 GB
128K3 GB114,7 GB
256K6 GB117,7 GB

Gemessene Geschwindigkeit teilen

Führe einen dieser Befehle aus und füge die ganze Ausgabe unten ein (oder nur die Tokens pro Sekunde):

llama-bench -m model.gguf
ollama run model --verbose

Anonym veröffentlicht und aufbewahrt. Wir speichern kein Konto und keine Adresse, nur einen täglich wechselnden Hash für ein Limit von zehn Einsendungen pro Tag.

Nächste Schritte

Kann ich Qwen3.8 Flash Next lokal ausführen?

Kann ich Qwen3.8 Flash Next lokal ausführen?

Ja, wenn deine GPU oder dein Mac in Q4_K_M etwa 111,9 GB frei hat. Öffne diese Seite auf dem Rechner, um die Note für deine Hardware zu sehen, und starte es mit llama.cpp, Ollama oder LM Studio.

Wie viel Speicher braucht Qwen3.8 Flash Next?

Etwa 111,9 GB in Q4_K_M mit 8K Kontext und 175,8 GB in Q8_0. Niedrigere Quantisierungen passen auf kleinere Karten, mit etwas Qualitätsverlust; längerer Kontext kommt hinzu.