Aller au contenu
ReviewRamble

La lettre hebdomadaire

L’IA, évaluée, dans votre boîte mail.

  • Les nouveaux tests d’outils, de modèles, de serveurs MCP et de dépôts, avec le verdict en premier
  • Les prix et les notes revérifiés quand quelque chose change
  • Les nouvelles analyses dès leur publication

Modèles, agents, serveurs MCP et les outils qui méritent vraiment votre temps.

Un e-mail par semaine. Désinscrivez-vous avec le lien présent dans chaque lettre. Comment nous utilisons votre e-mail

Qwen3.8-Flash-Next : configuration GPU requise, VRAM et GPU le moins cher

Qwen3.8-Flash-Next compte 180 Md paramètres, publiés en BF16. C’est un modèle à mélange d’experts : 10 de ses 512 experts traitent chaque token, soit environ 61,6 Md paramètres, il génère donc à peu près à la vitesse d’un modèle de cette taille. Tous les experts doivent malgré tout résider en mémoire GPU, d’où des chiffres de mémoire ci-dessous pour le modèle complet. Sa licence (qwen-community-1.0) ajoute ses propres conditions : lisez-la avant tout usage commercial.

Paramètres
180 Md
Empreinte minimale (INT4)
environ 105 Go
GPU le moins cher par heure (FP16)
2,39 $US
Type
Vision
  • Paramètres 180 Md
  • Actifs par token 61,6 Md
  • Type Vision
  • Tâche image-text-to-text
  • Contexte max. 256K
  • Licence qwen-community-1.0
  • Téléchargements 3,1 M
  • J’aime 7,1 k

Calcul pour Qwen3.8-Flash-Next

Précision
Usage
Plus de réglages
Moteur d’inférence
Requêtes simultanées

Qwen3.8-Flash-Next demande environ 397 Go de mémoire GPU

Inférence (vLLM), FP16 / BF16, contexte de 8K tokens, une requête à la fois.

Où va la mémoire

  • Poids 360 Go
  • Cache KV 0,2 Go
  • Surcoût du moteur 37 Go
  • Total 397 Go

Le nombre de GPU laisse 10 % de chaque carte libre pour les pics. Prévoyez davantage si vous attendez de longs prompts ou beaucoup d’utilisateurs en même temps.

Les GPU qui conviennent, du moins cher au plus cherChaque type de GPU suivi capable d’accueillir cette configuration sur un nœud, classé par coût horaire total
RangConfigurationPar GPU / hGPU nécessairesTotal / hTotal / mois (24/7)Fournisseur
13 × MI300X 192GBLa moins chèreCDNA 3 · HBM32,39 $US3vendue avec 4 GPU ; il vous en faut 39,56 $US6 979 $USRunPod (s’ouvre dans un nouvel onglet)4x MI300X
25 × RTX PRO 6000 96GBBlackwell · GDDR71,80 $US5vendue avec 8 GPU ; il vous en faut 514,40 $US10 512 $USNebius (s’ouvre dans un nouvel onglet)8x RTX PRO 6000 96GB
34 × H200 141GBHopper · HBM3e3,79 $US415,16 $US11 067 $USRunPod (s’ouvre dans un nouvel onglet)4x H200 NVL
46 × A100 80GBAmpere · HBM2e2,09 $US6vendue avec 8 GPU ; il vous en faut 616,72 $US12 206 $USRunPod (s’ouvre dans un nouvel onglet)8x A100 PCIe
52 × B300 288GBBlackwell Ultra · HBM3e8,99 $US217,98 $US13 125 $USRunPod (s’ouvre dans un nouvel onglet)2x B300
66 × H100 80GBHopper · HBM32,89 $US6vendue avec 8 GPU ; il vous en faut 623,12 $US16 878 $USRunPod (s’ouvre dans un nouvel onglet)8x H100 PCIe
75 × H100 NVL 94GBHopper · HBM33,19 $US5vendue avec 8 GPU ; il vous en faut 525,52 $US18 630 $USRunPod (s’ouvre dans un nouvel onglet)8x H100 NVL
83 × B200 180GBBlackwell · HBM3e7,79 $US3vendue avec 4 GPU ; il vous en faut 331,16 $US22 747 $USLambda (s’ouvre dans un nouvel onglet)4x B200 SXM6
93 × GB200 186GBBlackwell · HBM3e10,50 $US3vendue avec 4 GPU ; il vous en faut 342,00 $US30 660 $USCoreWeave (s’ouvre dans un nouvel onglet)GB200 NVL72
Plus de 8 : plusieurs nœuds nécessaires: L40S 48GB, RTX 6000 Ada 48GB, RTX A6000 48GB, A40 48GB, A100 40GB, RTX 5090 32GB, RTX 4090 24GB, RTX 3090 24GB, L4 24GB, A10 24GB, T4 16GB, V100 16GB
Coût par cloudOffre la moins chère qui convient, par fournisseur. Approximatif, prix relevés le 13 nov. 2026.
FournisseurInstancePar GPU / hGPU nécessairesTotal / hTotal / mois (24/7)
RunPod (s’ouvre dans un nouvel onglet)La moins chère4x MI300Xus2,39 $US3 × MI300X 192GB vendue avec 4 GPU ; il vous en faut 3environ 9,56 $USenviron 6 979 $US
Nebius (s’ouvre dans un nouvel onglet)8x RTX PRO 6000 96GBeu/us1,80 $US5 × RTX PRO 6000 96GB vendue avec 8 GPU ; il vous en faut 5environ 14,40 $USenviron 10 512 $US
CoreWeave (s’ouvre dans un nouvel onglet)RTX PRO 6000 Blackwell Server Edition (High Memory)us2,50 $US5 × RTX PRO 6000 96GB vendue avec 8 GPU ; il vous en faut 5environ 20,00 $USenviron 14 600 $US
Vultr (s’ouvre dans un nouvel onglet)vbm-112c-2048gb-8-a100-gpu (bare metal)us2,80 $US6 × A100 80GB vendue avec 8 GPU ; il vous en faut 6environ 22,40 $USenviron 16 352 $US
Vast.ai (s’ouvre dans un nouvel onglet)4x H200 (median of 4 offers)place de marché mondiale5,67 $US4 × H200 141GB environ 22,68 $USenviron 16 554 $US
Lambda (s’ouvre dans un nouvel onglet)8x HGX A100us3,19 $US6 × A100 80GB vendue avec 8 GPU ; il vous en faut 6environ 25,52 $USenviron 18 630 $US
AWS (s’ouvre dans un nouvel onglet)p4de.24xlargeus-east-13,43 $US6 × A100 80GB vendue avec 8 GPU ; il vous en faut 6environ 27,45 $USenviron 20 036 $US
Azure (s’ouvre dans un nouvel onglet)ND96amsr_A100_v4eastus4,10 $US6 × A100 80GB vendue avec 8 GPU ; il vous en faut 6environ 32,77 $USenviron 23 922 $US
Google Cloud (s’ouvre dans un nouvel onglet)g4-standard-384us-central14,50 $US5 × RTX PRO 6000 96GB vendue avec 8 GPU ; il vous en faut 5environ 36,00 $USenviron 26 280 $US

Prix relevés le 13 nov. 2026. Tous les coûts sont approximatifs : à la demande, en dollars US, surtout des régions des États-Unis (les places de marché comme Vast.ai sont mondiales).

Mémoire par précision et par usage

Avec un contexte de 8K tokens et une requête à la fois. LoRA et le fine-tuning complet partent de poids en 16 bits, QLoRA de 4 bits : les autres cases restent vides.
PrécisionInférenceFine-tuning LoRAFine-tuning QLoRAFine-tuning complet
FP16 / BF16397 Go463 Go–3 172 Go
INT8209 Go–––
INT4105 Go–171 Go–

Le GPU le moins cher par précision

Inférence avec un contexte de 8K et une requête à la fois.

FP16 / BF16

environ 397 Go · 8K tokens

Les poids tels que publiés. Aucune perte, mais l’empreinte la plus lourde.

3 × MI300X 192GB

RunPod (s’ouvre dans un nouvel onglet) · 4x MI300X

vendue avec 4 GPU ; il vous en faut 3
Par GPU / h
2,39 $US
GPU nécessaires
3
Total / h
environ 9,56 $US
par mois, 24/7, environ
6 979 $US

INT8

environ 209 Go · 8K tokens

Des poids deux fois plus légers. Pour le chat et le RAG, la différence se voit à peine.

5 × A40 48GB

RunPod (s’ouvre dans un nouvel onglet) · 8x A40

vendue avec 8 GPU ; il vous en faut 5
Par GPU / h
0,59 $US
GPU nécessaires
5
Total / h
environ 4,72 $US
par mois, 24/7, environ
3 446 $US

INT4

environ 105 Go · 8K tokens

Des poids quatre fois plus légers. Les petites pertes apparaissent d’abord en maths et en code.

3 × A40 48GB

RunPod (s’ouvre dans un nouvel onglet) · 4x A40

vendue avec 4 GPU ; il vous en faut 3
Par GPU / h
0,59 $US
GPU nécessaires
3
Total / h
environ 2,36 $US
par mois, 24/7, environ
1 723 $US

Inférence ou fine-tuning

  • Inférence (FP16)

    1×

    de la mémoire nécessaire à l’inférence

    397 Go

    3 × MI300X 192GB · environ 9,56 $US

  • Fine-tuning LoRA

    1,2×

    de la mémoire nécessaire à l’inférence

    463 Go

    3 × MI300X 192GB · environ 9,56 $US

  • Fine-tuning QLoRA

    0,4×

    de la mémoire nécessaire à l’inférence

    171 Go

    4 × A40 48GB · environ 2,36 $US

  • Fine-tuning complet

    8×

    de la mémoire nécessaire à l’inférence

    3 172 Go

    plus d’un nœud de 8 GPU

Pour le servir en FP16, 3 × MI300X 192GB (RunPod) suffit. LoRA demande 3 × MI300X 192GB (RunPod), QLoRA 4 × A40 48GB (RunPod) et un fine-tuning complet plus d’un nœud de 8 GPU. L’entraînement garde en mémoire les activations et l’état de l’optimiseur en plus des poids, d’où un besoin fréquent de plus de GPU que pour servir le même modèle.

Fonctionne-t-il sur un Mac ou une seule RTX 4090 ?

RTX 4090 (24 Go)

Pas seule. Même en INT4, il demande environ 105 Go, plus que les 24 Go de la carte. Deux cartes ou plus, ou un GPU de centre de données plus grand, suffisent.

Mac avec puce Apple

Oui, avec assez de mémoire. En INT4, il demande environ 105 Go, donc un Mac avec 192 Go ou plus de mémoire unifiée (macOS en laisse environ les trois quarts au GPU). La génération sera plus lente que sur un GPU de centre de données.

L’héberger vous-même ou payer au token ?

L’héberger vous-même

La configuration FP16 la moins chère que nous ayons trouvée est 3 × MI300X 192GB chez RunPod, environ 6 979 $US par mois en continu. Intéressant pour un trafic régulier ou des données qui doivent rester sur vos machines.

Passer par une API hébergée

Notre test de Qwen3.8-Flash-Next indique où l’utiliser via une API et à quel prix. Payer au token revient souvent moins cher pour un trafic faible ou irrégulier.

Lire notre test

Modèles similaires

Des modèles ouverts de taille comparable.

Calculer un autre modèle

Qwen3.8-Flash-Next : questions fréquentes

Combien de VRAM faut-il pour Qwen3.8-Flash-Next ?

Environ 397 Go en FP16, 209 Go en INT8 et 105 Go en INT4, avec un contexte de 8K et une requête à la fois. Un contexte plus long et davantage de requêtes en parallèle ajoutent du cache KV.

Quel est le GPU le moins cher pour faire tourner Qwen3.8-Flash-Next ?

3 × MI300X 192GB (environ 2,39 $US par GPU / heure; vendue avec 4 GPU ; il vous en faut 3) chez RunPod, pour environ 9,56 $US de l’heure en inférence FP16 / BF16 avec un contexte de 8K. Prix relevés le 13 nov. 2026 ; ils changent souvent.

Peut-on faire le fine-tuning de Qwen3.8-Flash-Next sur un seul GPU ?

Pas sur un seul GPU. Même QLoRA demande environ 171 Go, plus que ce que contient un GPU de 80 Go. LoRA demande environ 463 Go et un fine-tuning complet environ 3 172 Go.

Comment ces chiffres sont-ils calculés ?

Les poids correspondent aux paramètres multipliés par les octets par paramètre (2 en FP16, 1 en INT8, 0,5 en INT4). Le cache KV dépend des couches, des têtes KV, de la taille de tête et de la longueur de contexte du modèle. Nous ajoutons environ 10 % plus 1 Go pour le moteur et remplissons chaque GPU à 90 %. Les prix sont les tarifs catalogue à la demande dans les régions des États-Unis, relevés sur la page publique de chaque fournisseur.

Qwen3.8-Flash-Next fonctionne-t-il sur un GPU grand public comme la RTX 4090 ?

Pas seule. Même en INT4, il demande environ 105 Go, plus que les 24 Go de la carte. Deux cartes ou plus, ou un GPU de centre de données plus grand, suffisent.

Qwen3.8-Flash-Next tient-il sur une seule H100 80 Go ?

Non. Même en INT4, il demande environ 105 Go : il faut plusieurs GPU.

Combien de GPU faut-il pour Qwen3.8-Flash-Next ?

En FP16 avec un contexte de 8K : 6 × 80 Go, 10 × 48 Go ou 19 × 24 Go. En INT4, les poids prennent environ le quart de la mémoire.

Combien de VRAM faut-il pour Qwen3.8-Flash-Next en INT8 ?

Environ 209 Go : 189 Go pour les poids, 0,2 Go pour un cache KV de 8K et 20 Go de surcoût du moteur.

Combien coûte Qwen3.8-Flash-Next en fonctionnement 24/7 pendant un mois ?

Environ 6 979 $US avec la configuration la moins chère que nous avons trouvée (3 × MI300X 192GB (environ 2,39 $US par GPU / heure; vendue avec 4 GPU ; il vous en faut 3), 9,56 $US de l’heure pendant 730 heures). Le moins cher chez AWS, Google Cloud ou Azure revient à environ 20 036 $US par mois.

FP16, INT8 ou INT4 : lequel choisir ?

Le FP16 garde toute la qualité et demande le plus de mémoire (environ 397 Go ici). L’INT8 divise les poids par deux avec peu de perte pour la plupart des usages de chat. L’INT4 (AWQ, GPTQ ou GGUF Q4) les réduit au quart, environ 105 Go au total, avec une légère baisse de qualité, surtout visible en maths et en code.

Qwen3.8-Flash-Next fonctionne-t-il sur un Mac ?

Oui, avec assez de mémoire. En INT4, il demande environ 105 Go, donc un Mac avec 192 Go ou plus de mémoire unifiée (macOS en laisse environ les trois quarts au GPU). La génération sera plus lente que sur un GPU de centre de données.

vLLM ou llama.cpp ?

vLLM est conçu pour servir de nombreuses requêtes à la fois sur des GPU NVIDIA et AMD et réserve l’essentiel de la mémoire GPU au cache KV. llama.cpp lit les fichiers GGUF sur presque tout, Mac et CPU compris, et convient à une personne ou à une petite équipe. À précision égale, la mémoire nécessaire est proche.

Prix relevés le 13 nov. 2026. Tous les coûts sont approximatifs : à la demande, en dollars US, surtout des régions des États-Unis (les places de marché comme Vast.ai sont mondiales).

Notre méthode de calcul

  • Poids. Paramètres multipliés par les octets par paramètre : 2 en FP16, 1 en INT8, 0,5 en INT4, plus environ 5 % pour les échelles de quantification en INT8 et INT4.
  • Cache KV. 2 × couches × têtes KV × taille de tête × contexte × requêtes × 2 octets, d’après le config.json du modèle. Si une valeur manque, nous l’estimons et le signalons.
  • Surcoût. Environ 10 % plus 1 Go pour le moteur, dans la ligne de ce que réserve vLLM.
  • Fine-tuning. LoRA garde des poids en 16 bits et ajoute un petit adaptateur, son optimiseur et les activations. QLoRA fait de même sur des poids en 4 bits. Un fine-tuning complet demande environ 16 octets par paramètre avec Adam en précision mixte (poids, gradients et états de l’optimiseur), plus les activations.
  • GPU. Nous remplissons chaque GPU à 90 % de sa mémoire et nous arrêtons à 8 par nœud. Les coûts sont les prix catalogue à la demande dans les régions des États-Unis ; pour les places de marché, nous montrons l’offre médiane.