Aller au contenu

Analyse critique

Ce que le modèle réussit, ce qu'il ne réussit pas, et ce qui reste à démontrer.


Le principe

Cette partie ne cherche ni à louer ni à démolir. Elle applique une règle constante : séparer ce qui est établi de ce qui est affirmé.

Trois catégories reviennent :

Catégorie Exemple
Vérifié le décompte des paramètres — recalculé, écart de 0,30 %
Affirmé et plausible les benchmarks du tableau officiel
Affirmé et invérifiable la reproduction d'article, la puce, la boutique

Une affirmation invérifiable n'est pas fausse. Elle est simplement inutilisable comme argument.


Les quatre chapitres

01 · Forces

Ce que Qwen3.8-Max fait réellement bien, et ce que la publication des poids apporte au-delà du modèle lui-même.

~10 min · ★★☆

02 · Limites

Le codage à l'échelle du dépôt, la vitesse, l'absence de documentation, les poids inexploitables — et les angles morts.

~15 min · ★★☆

03 · Affirmations à vérifier

Le tableau des niveaux de preuve, revendication par revendication.

~10 min · ★★☆

04 · Questions ouvertes

Ce qu'on ne sait pas, ce qu'il faudrait pour le savoir, et ce qui mérite d'être surveillé.

~10 min · ★★☆


Le jugement d'ensemble, d'emblée

Ce qui est solide

  • Un modèle de niveau frontière confirmé par deux évaluateurs indépendants.
  • Une architecture cohérente et bien conçue, entièrement vérifiable depuis config.json.
  • Un prix bas et une tarification simple.
  • Une publication de poids qui change la structure du marché, même si peu de gens peuvent les exécuter.
  • Un tableau de benchmarks honnête sur ses défaites.

Ce qui ne l'est pas

  • Aucun rapport technique. Aucune ablation, aucune recette d'entraînement, aucune loi d'échelle.
  • Un retard de 12 à 16 points sur le codage à l'échelle du dépôt, précisément le domaine mis en avant.
  • Un modèle lent : 119ᵉ sur 184 en vitesse.
  • Un écart de 19 points non expliqué sur Terminal-Bench 2.1 selon les sources.
  • Un million de jetons revendiqué mais jamais mesuré au-delà de 256 K.
  • Un écart entre l'API et les poids que la communication ne signale pas.

Commencer : Forces.