Arrakis / Modèles / DeepSeek-V4.1-Flash

Besoins GPU de DeepSeek-V4.1-Flash

DeepSeek-V4.1-Flash compte 763B paramètres. Pour le servir, prévoyez environ 1 832 Go de mémoire GPU en 16 bits, 916 Go en 8 bits ou 458 Go en 4 bits, dont environ 20 % pour le cache KV et les activations.

C’est un modèle à mélange d’experts : 384 experts, dont 6 actifs pour chaque token. Tous restent en mémoire GPU : prévoyez la mémoire pour l’ensemble des 763B paramètres.

Ce qu’il faut pour le servir

La mémoire GPU pour le faire tourner en inférence, avec la plus petite configuration GPU qui le contient et le prix le plus bas sur Arrakis en ce moment.

PrécisionMémoire et plus petite configuration
16 bits1 832 Go : 8 × B300, à partir de 36,80 $ de l’heure pour les 8
8 bits916 Go : 4 × B300, à partir de 18,40 $ de l’heure pour les 4
4 bits458 Go : 2 × B300, à partir de 9,20 $ de l’heure pour les 2

Ce qu’il faut pour l’affiner

QLoRA entraîne des adaptateurs sur un modèle figé en 4 bits, LoRA sur un modèle en 16 bits, et le fine-tuning complet met à jour tous les poids. Les chiffres s’entendent hors activations, qui augmentent avec la taille des lots et la longueur des séquences.

MéthodeMémoire et plus petite configuration
QLoRA534 Go : 4 × H200, à partir de 16,12 $ de l’heure pour les 4
LoRA1 832 Go : 8 × B300, à partir de 36,80 $ de l’heure pour les 8
Fine-tuning complet12 211 Go : plus d’une machine à 8 GPU

À propos du modèle

D’après sa fiche et ses fichiers sur Hugging Face. Les chiffres de mémoire suivent le guide de la mémoire GPU.

Paramètres
763B
Experts
384
Experts par token
6
Fenêtre de contexte (tokens)
1,048,576
Publié en
FP8
Licence
mit
Date de publication
2026-09-10
Poids
deepseek-ai/DeepSeek-V4.1-Flash

Déployez-le sur Arrakis

Ouvrez Models dans la console, choisissez vLLM, SGLang ou llama.cpp, et louez un GPU sur lequel il tient. Vous obtenez un endpoint compatible OpenAI avec sa propre clé d’API, et un accès SSH root à la machine. Ou faites-le tourner vous-même sur n’importe quelle machine avec assez de mémoire GPU :

vLLM
vllm serve deepseek-ai/DeepSeek-V4.1-Flash --tensor-parallel-size 8

Questions

Les prix en temps réel de tous les GPU sont sur la page Prix des GPU.

De combien de mémoire GPU DeepSeek-V4.1-Flash a-t-il besoin ?
Pour le servir, environ 1 832 Go en 16 bits, 916 Go en 8 bits et 458 Go en 4 bits, dont environ 20 % pour le cache KV et les activations. Pour l’affiner, environ 534 Go avec QLoRA, 1 832 Go avec LoRA et 12 211 Go pour un fine-tuning complet avec Adam, hors activations.
Puis-je faire tourner DeepSeek-V4.1-Flash sur un seul GPU ?
Non. Même en 4 bits, il lui faut environ 458 Go : 2 GPU B300.
Combien coûte l’exécution de DeepSeek-V4.1-Flash ?
En 16 bits, il lui faut 8 GPU B300 ; en 4 bits, 2 GPU B300. Chaque configuration de cette page affiche le prix le plus bas par heure de GPU sur Arrakis en ce moment, et vous payez à l’heure depuis un solde prépayé.
Comment déployer DeepSeek-V4.1-Flash sur Arrakis ?
Ouvrez Models dans la console Arrakis, collez deepseek-ai/DeepSeek-V4.1-Flash, choisissez vLLM, SGLang ou llama.cpp, et louez un GPU sur lequel il tient. Vous obtenez un endpoint compatible OpenAI avec sa propre clé d’API, et un accès SSH root à la machine.