Aller au contenu
ReviewRamble

La lettre hebdomadaire

L’IA, évaluée, dans votre boîte mail.

  • Les nouveaux tests d’outils, de modèles, de serveurs MCP et de dépôts, avec le verdict en premier
  • Les prix et les notes revérifiés quand quelque chose change
  • Les nouvelles analyses dès leur publication

Modèles, agents, serveurs MCP et les outils qui méritent vraiment votre temps.

Un e-mail par semaine. Désinscrivez-vous avec le lien présent dans chaque lettre. Comment nous utilisons votre e-mail

Actualités et recherche IA

Actualités ·

Edge0 affirme qu'un modèle de 145B tourne sur un portable avec 29GB de mémoire

Edge0 a publié Edge0-145B, un modèle à mélange d'experts d'environ 10B de paramètres actifs qui répartit les experts entre GPU, RAM système et SSD, ainsi qu'un modèle frère de 120B. L'entreprise annonce un pic mémoire de 29GB, plus de 80 tokens par seconde en décodage et 86.52 sur Terminal-Bench 2.1. Tous les scores, y compris ceux des concurrents, viennent de ses propres tests, et aucune licence n'est précisée.

Faire tourner un modèle grand et compétent sur son propre ordinateur portable signifiait jusqu'ici un petit modèle ou une machine très coûteuse. Edge0, dont nous avons évalué le modèle 35B pour téléphone, annonce désormais un modèle de 145 milliards de paramètres qui tourne sur un portable bien équipé avec un pic mémoire mesuré de 29GB, poids et code d'inférence publiés en accès libre. Si les chiffres tiennent, des agents de programmation locaux sérieux deviennent possibles sur du matériel que beaucoup de développeurs possèdent déjà.

La conception explique ce chiffre de mémoire. Edge0-145B est un modèle à mélange d'experts dans lequel chaque groupe de 64 experts partage deux grandes matrices, chaque expert ne conservant qu'un petit ensemble de paramètres propres ; environ 10B paramètres sont actifs à chaque étape. Le moteur répartit le modèle sur trois niveaux : les experts les plus utilisés restent en mémoire GPU, une bibliothèque d'experts d'environ 40GB réside en mémoire système, et environ 48GB de données de vocabulaire restent sur le SSD et sont lus à la demande. Le CPU et le GPU travaillent en parallèle, et le décodage spéculatif vérifie plusieurs jetons candidats à la fois. Edge0 annonce plus de 80 jetons par seconde.

Les résultats annoncés sont élevés. Edge0 revendique 64,6 sur DeepSWE 1.1, 86,52 sur Terminal-Bench 2.1, 90,4 sur GPQA-Diamond et 80,6 sur IFBench, et une moyenne de 72,8 sur six bancs d'essai contre 71,7 pour Qwen3.8-Flash-Next, dont il estime le déploiement standard en 4 bits à 70GB. Edge0 se situerait ainsi à environ 40% de cette mémoire, ce qui fait d'un portable de 48GB le minimum pratique. La prise en charge dès le lancement couvre macOS, Windows et Linux, y compris les puces Apple de la série M et les cartes NVIDIA RTX.

Pour qui fait tourner des modèles locaux avec llama.cpp, Ollama ou LM Studio, l'intérêt tient davantage à la conception en flux qu'au nombre de paramètres. Garder la plupart des experts hors du GPU et lire le vocabulaire sur le SSD est un autre compromis que quantifier plus fort, et suppose un stockage rapide. Edge0 indique aussi publier toute la pile afin que les résultats puissent être reproduits.

Les doutes sont sérieux. Les résultats de Qwen, DeepSeek et Claude proviennent des évaluations internes d'Edge0, les chiffres de mémoire des concurrents sont des estimations non encore mesurées, et le rapport technique détaillant la configuration n'est pas encore sorti. Les mesures de vitesse et de mémoire viennent des propres tests d'Edge0 sur un portable non précisé. Notre évaluation de sa version 35B relevait une ingénierie soignée mais des chiffres de vitesse presque tous fournis par ses concepteurs, et la même prudence s'impose ici jusqu'à des essais indépendants.

Notre avis : Faire tourner un modèle de cette taille sur un portable de 48GB compterait pour le travail privé et hors ligne, mais les chiffres sont autodéclarés et les données de mémoire ne concordent pas tout à fait. Mieux vaut attendre des tests indépendants et une licence explicite avant de le qualifier d'« open source ».

Nos tests :edge0

Source : Hacker News

Autres articles