← Zurück zur Übersicht

DeepSeek-V4.1-Flash

DeepSeek
MIT

Offenes Sprachmodell für Chat und Text. 3 Grössen von 304.2B bis 1.7T Parametern, teils Mixture-of-Experts (nur ein Teil der Parameter ist pro Token aktiv).

  • Mixture-of-Experts: 763.2B Parameter insgesamt, davon 228.1B pro Token aktiv. Der Speicherbedarf richtet sich nach allen Parametern, das Tempo nach den aktiven.

Einstellungen

Qualität
4 Bit (Q4_K_M) ist die gängigste Wahl: gute Qualität bei geringem Speicherbedarf.
Kontextlänge: 8k Tokens
4k256k
Wie viel Text das Modell gleichzeitig im Blick hat. Mehr Kontext braucht mehr Speicher.
Empfehlung
8× H100 80 GB

Das Modell braucht rund 460.1 GB Speicher. Hopper, FP8-Support.

Gewichte
457.9 GB
KV-Cache
0.7 GB
Geschwindigkeit
~4.8 Tok./s

Weitere passende Konfigurationen

KarteAnzahlTok./sStatus
A100 80 GB8×3.42-3 Wochen Lieferfrist
H100 80 GB8×4.8Auf Anfrage