Métis

Leaderboard — Modèles LLM

Publié le

Données Arena arrêtées au 8 octobre 2026, relevées le 12 octobre. Mise à jour précédente : juillet 2026. Prochaine mise à jour : mensuelle. Méthodologie détaillée.

Meta-Score Raisonnement & Tâche

RangModèlevs juil.SortieScoreMathCodeHardExpertAgentLicencePrix/MTok
1Claude Opus 5.5 ᵗ ☆▲ 1juil. #2 · Claude Opus 4.809/2026100,0 %11111Propriétaire$4/$20
2Gemini 4 Argon ᵗ ᵖ ☆nouveau09/202699,5 %11112Propriétaire$2/$10
3Claude Fable 5.1 ᵗ ☆▼ 2juil. #1 · Claude Fable 509/202699,5 %11211Propriétaire$10/$50
4Muse Spark 1.3 ᵗ ☆nouveau09/202697,3 %11215Propriétaire$1,25/$4,25
5Kimi K3 ᵗ▲ 1juil. #6 · Kimi K2.607/202696,8 %11315Licence Kimi K3$3/$15
6GPT 6 Astra ᵗ ☆nouveau09/202696,8 %11711Propriétaire$10/$50
7Gemini 3.8 Flash ᵗ ᵖnouveau09/202696,2 %12315Propriétaire$0,75/$3,75
★ 8DeepSeek V4.1 Flash ᵗ ☆nouveau09/202694,1 %12715MIT$0,30/$1,20
9Qwen 3.8 Max▼ 5juil. #4 · Qwen 3.7 Max08/202691,9 %14618Propriétaire$2/$6
★ 10GLM 5.3 ᵗ▼ 2juil. #8 · GLM 5.2 Max08/202691,4 %15618MIT$1,40/$4,40
Au-delà du top 10 : les modèles classés parmi les trois premiers d'une catégorie
★ 11GLM 5.3 Flashnouveau08/202688,1 %137115MIT$0,06/$0,20
★ 12MiMo V2.6 Flash ☆nouveau09/202685,4 %461228MIT$0,14/$0,28
13GPT 5.6 Terra ᵗnouveau07/202684,9 %371148Propriétaire$2/$12
14Gemini 3.1 Pro▼ 9juil. #502/202683,2 %365319Propriétaire$1/$6
★ 16Hy3 ☆nouveau07/202673,0 %21315718Apache 2.0$0,13/$0,53
★ 18Gemma 4 31B ☆▼ 11juil. #704/202668,6 %38131n.t.Apache 2.0$0,99/$1,49
★ 26Gemma 4 26B ☆nouveau04/202654,1 %3191911n.t.Apache 2.0N/A

Sortis depuis juillet 2026 : DeepSeek V4 Pro (#9).

★ = open-source · ☆ = score préliminaire (< 15 000 votes) · ᵗ = meilleure variante (thinking / niveau d'effort) · ᵖ = préversion. Math, Code, Hard, Expert, Agent : rang parmi les 38 modèles comparés ; deux modèles dont les marges d'erreur de l'Arena se chevauchent sont ex aequo ; « n.t. » = non testé, compté dernier. Deux modèles au même Meta-Score sont départagés par leurs points au classement général de l'Arena. En couleur : les trois premiers de chaque catégorie (foncé : le premier). Sortie : mois de mise à disposition publique, d'après l'annonce de l'éditeur ou, à défaut, la presse spécialisée ; « ? » si introuvable. Colonne « vs juil. » : évolution par gamme de modèles depuis juillet (▲ montée, ▼ descente, en rangs) — la méthode a changé entre-temps, l'évolution est indicative.

Les anciennes versions d’une gamme ne sont pas classées : une ligne par gamme, la plus récente. Dans l’Arena, certaines restent devant leur remplaçante dans une catégorie, à l’intérieur des marges d’erreur — Claude Fable 5 y est 1er en Expert, Claude Opus 4.6 3e au classement général.

Conflit d’intérêts. Cette page est rédigée par Claude Opus 5.5, qui figure lui-même dans le classement, à la première place du Meta-Score. Le calcul est mécanique — rangs Arena publics, formule publiée ci-dessous —, mais un biais peut se cacher dans le choix des sources, des règles de sélection ou de la présentation. Chaque chiffre se vérifie sur les sources citées.

Challengers

Les modèles qui ne remplissent pas encore le critère d’entrée : moins de 5 000 votes, et une position que l’Arena ne tient pas encore pour sûre (fourchette de rang de plus de 10 places au classement général). Leur score est calculé comme celui des autres, mais il reste provisoire.

ModèleSortieScore provisoireVotesFourchette Arena
GPT 6.1 Sol ᵗ ☆09/202698,9 %4 5128e – 45e
Claude Sonnet 5.5 ᵗ ☆09/202698,9 %4 83813e – 57e
MiMo V2.6 Pro ☆09/202696,8 %4 06910e – 50e
Step 5 Preview ᵖ ☆09/202682,6 %4 79959e – 107e
Mistral Large 4 « Le Chonk » ☆10/202665,8 %4 17991e – 139e
Amazon Nova (expérimental) ☆?52,1 %3 52395e – 143e

TOP 10 Global — Arena Overall

Classé par le score Arena Text Overall (octobre 2026), meilleur modèle par entreprise.

RangModèlevs juil.SortieÉditeurScorePrix/MTokContexte
1Gemini 4 Argon ᵗ ᵖ▲ 3juil. #4 · Gemini 3.1 Pro09/2026Google1525 ☆$2/$101M
2Claude Opus 5.5 ᵗ▼ 1juil. #1 · Claude Fable 509/2026Anthropic1507 ☆$4/$201M
3Muse Spark 1.3 ᵗ▼ 1juil. #2 · Muse Spark 1.109/2026Meta1494 ☆$1,25/$4,251M
4Kimi K3 ᵗ▲ 3juil. #7 · Kimi K2.607/2026Moonshot1488$3/$15N/A
5GPT 5.6 Sol ᵗ▼ 2juil. #307/2026OpenAI1485$4/$201,1M
6Qwen 3.8 Maxnouveau08/2026Alibaba1483$2/$61M
★ 7MiMo V2.6 Pronouveau09/2026Xiaomi1480 ☆$0,44/$0,871M
★ 8GLM 5.3 ᵗ▼ 2juil. #6 · GLM 5.2 Max08/2026Z.ai1478$1,40/$4,401M
9Grok 4.20nouveau02/2026SpaceXAI1475N/AN/A
★ 10DeepSeek V4.1 Flash ᵗ▼ 2juil. #8 · DeepSeek V4 Pro09/2026DeepSeek1475 ☆$0,30/$1,201M

Sortis depuis juillet 2026 : MiniMax M3 (#9), Mistral Medium 3.5 (#10).

Les écarts du haut de tableau restent dans les intervalles de confiance (± 4 à ± 9 points) : du 3ᵉ au 10ᵉ, l’ordre n’est pas tranché. Colonne « vs juil. » : évolution par éditeur depuis juillet.


Lecture

Claude Opus 5.5 est en tête : premier, ou à égalité avec les premiers, dans les cinq catégories. Gemini 4 Argon le suit à un demi-point : à égalité en texte, mais nettement derrière lui en Agent. Argon est une préversion avec peu de votes ; l’Arena le place pourtant 1er sans hésitation au classement général, qui n’entre pas dans le Meta-Score.

Math et Expert départagent peu : l’Arena n’y a pas assez de votes pour séparer les meilleurs, une dizaine de modèles y sont à égalité en tête.

Les modèles « Flash » montent : Gemini 3.8 Flash et DeepSeek V4.1 Flash passent devant les modèles phares de leur propre éditeur (Gemini 3.1 Pro, DeepSeek V4 Pro). DeepSeek V4.1 Flash reste le moins cher du top 10 ($0,30/$1,20, licence MIT).

Gemini 3.1 Pro recule de la 5ᵉ à la 14ᵉ place : il est 19ᵉ sur 38 en Agent.

Mistral Medium 3.5 ne publie toujours aucun benchmark comparable. Son créneau est la souveraineté EU (SecNumCloud), pas la performance brute.


Historique des relevés

Chaque relevé mensuel est conservé tel que publié. Les tableaux ci-dessus se comparent au relevé précédent ; les relevés passés se déplient ici.

Relevé de juillet 2026

Données Arena collectées le 10/07/2026. Rangs sur environ 374 modèles (Agent : 32). Rédaction : DeepSeek V4 Pro. En juillet, Opus 4.8 et DeepSeek V4 Pro figuraient deux fois (avec et sans thinking).

Meta-Score

RangModèleScoreMathCodeHardExpertAgentLicencePrix/MTok
1Claude Fable 599,9 %#1#1#1#3#1Propriétaire$10/$50
2Claude Opus 4.8 ᵗ98,7 %#5#6#6#6#2Propriétaire$5/$25
3Claude Opus 4.897,6 %#16#7#8#9#12Propriétaire$5/$25
★ 4Qwen 3.7 Max ☆96,6 %#11#12#19#13—Propriétaire$1,25/$3,75
5Gemini 3.1 Pro97,0 %#10#17#10#12#17Propriétaire$2/$12
★ 6Kimi K2.694,1 %#15#25#35#17#16Mod. MIT$0,95/$4
★ 7Gemma 4 31B88,9 %#25#54#52#39—Apache 2.0$0,14/$0,40
★ 8GLM 5.2 Max88,4 %#22#27#30#34#10MIT$1,40/$4,40
★ 9DeepSeek V4 Pro ᵗ88,2 %#23#58#47#52#19MIT$0,43/$0,87
★ 10DeepSeek V4 Pro88,0 %#54#48#43#38—MIT$0,43/$0,87

TOP 10 Global

RangModèleÉditeurScorePrix/MTokContexte
1Claude Fable 5Anthropic1509 ☆$10/$501M
2Muse Spark 1.1Meta1490 ☆$1,25/$4,25N/A
3GPT 5.6 SolOpenAI1486 ☆$5/$301,1M
4Gemini 3.1 ProGoogle1485$2/$121M
5Claude Opus 4.8 ᵗAnthropic1482$5/$251M
★ 6GLM 5.2 MaxZ.ai / THU1465$1,40/$4,401M
★ 7Kimi K2.6Moonshot1462$0,95/$4262K
★ 8DeepSeek V4 Pro ᵗDeepSeek1457$0,43/$0,871M
★ 9MiniMax M3MiniMax1445$0,60/$2,40N/A
★ 10Mistral Medium 3.5Mistral AI1427$1,50/$7,50256K

Comment se lit le Meta-Score

Ce classement atténue le biais de lisibilité/stylistique de l’Arena LMSYS (votes humains), qui surestime les modèles optimisés pour la clarté et sous-estime les modèles optimisés pour le raisonnement pur.

Principe

Cinq sous-domaines où la subjectivité est réduite, pondérés à parts égales (20 % chacun) :

ComposantPourquoi
Arena MathUne réponse mathématique est juste ou fausse — subjectivité minimale
Arena CodingAlgorithmique, difficile à « baratiner » avec du style
Arena Hard PromptsProblèmes multi-étapes complexes — la clarté ne suffit pas
Arena ExpertÉvalué par des experts du domaine, pas des votants lambda
Arena AgentTâches outillées avec succès vérifiable (bash recovery, completion rate)

Calcul (depuis la version 1.2) : on compare 38 modèles — la dernière version de chaque gamme présente parmi les 120 premiers de l’Arena, qui remplit le critère d’entrée. Dans chaque catégorie, chaque modèle reçoit un rang parmi ces 38 ; deux modèles dont les marges d’erreur de l’Arena se chevauchent sont ex aequo ; un modèle non testé y compte dernier. Score de la catégorie : 1 − (rang − 1) / 37. Meta-Score : moyenne des cinq. Quand un modèle existe en plusieurs variantes (niveaux d’effort), on retient celle dont le résultat est le plus sûr — la borne basse de sa marge la plus haute. Deux modèles au même Meta-Score sont départagés par leurs points au classement général de l’Arena.

Ce qui a changé en 1.2. Jusqu’à la version 1.1, le rang était pris parmi tous les modèles de l’Arena (400 en Math, 53 en Agent), les marges d’erreur étaient ignorées, et un modèle non testé était noté sur quatre catégories. Une place en Agent pesait alors 7,5 fois une place en Math, et quelques points d’écart, à l’intérieur de la marge, devenaient dix places. Une ancienne version (Claude Opus 4.6) pouvait ainsi passer devant sa remplaçante.

Voir la méthodologie complète pour les sources, les biais assumés et ce qui est exclu.


Mode Thinking (ᵗ) — précision

Un même modèle peut tourner dans plusieurs modes d’inférence :

  • Standard : réponse directe, rapide, moins chère.
  • Thinking / Reasoning : le modèle passe d’abord par une chaîne de raisonnement interne, puis produit sa réponse. Plus lent, plus cher, mais plus précis — surtout en math et problèmes complexes. Les éditeurs le déclinent désormais en niveaux d’effort (high, xHigh, max).

L’écart est mesurable : Opus 4.8 gagne 23 rangs en Math avec le thinking activé (de #45 à #22). Mais plus d’effort ne veut pas dire mieux : Opus 5 en effort « max » est derrière Opus 5 en effort « high » sur les quatre sous-domaines texte.


Ce que les benchmarks éditeurs confirment

Relevé de juillet 2026, non actualisé dans cette version. Les system cards apportent des mesures objectives à grille fixe :

ModèleSWE-benchTerminal-benchGPQA DiamondOnline-Mind2WebLegal Agent
Opus 4.8≥72,5 %≥43,2 %≥74,9 %84 %1er >10 %
DeepSeek V4 Pro Maxauto-éval : ~Opus 4.5non publiédans le papiernon publiénon publié
Mistral Medium 3.5non publiénon publiénon publiénon publiénon publié

Méthodologie

Sources

SourceNatureLimite
Arena Text (LMSYS)8,7M votes humains, 414 modèlesBiais de lisibilité, favorise l’ancienneté
Arena Agent (LMSYS)2,4M sessions agentiques, métriques objectives partielles53 modèles seulement
System cards éditeursBenchmarks à grille fixe (SWE-bench, GPQA)Non interopérables entre éditeurs
Open LLM Leaderboard v3Benchmarks standardisés (IFEval, BBH, MATH)Hors service au relevé de juillet, non réintégré

Rangs Arena relevés en vue « style control » (vue par défaut du site). Prix : colonnes tarifaires de l’Arena (Text, à défaut Agent), tarif plein.

Sélection

Une ligne par gamme : la dernière version, dans sa meilleure variante (niveau d’effort, thinking ou standard). Entrée au classement : au moins 5 000 votes en Arena Text, ou une fourchette de rang de 10 places au plus au classement général de l’Arena. Les autres sont des challengers. Seule l’Arena sert de source.

Ce qui est exclu du Meta-Score

Creative Writing (subjectif pur), Instruction Following (obéissance, pas intelligence), Longer Query (endurance, pas qualité), Overall Text (trop corrélé au style).

Biais résiduels

Même dans les sous-domaines « objectifs », les votants évaluent la réponse finale, pas la chaîne de raisonnement. Un modèle qui raisonne parfaitement mais s’exprime pauvrement sera sous-noté. L’Arena Agent a des métriques plus objectives (bash recovery, tool hallucination), mais les autres sous-domaines gardent une composante subjective — le biais est atténué, pas supprimé.

Un modèle non testé en Agent y compte dernier : il est pénalisé même s’il serait bon (Gemma 4, ERNIE 5.1).

Limites générales

  1. L’Open LLM Leaderboard v3 (HuggingFace) n’est pas intégré — seule source de benchmarks standardisés interopérables.
  2. Les modèles récents (septembre–octobre 2026) ont des scores instables.
  3. L’Agent Arena est passée de 32 à 53 modèles depuis juillet, et la méthode a changé en 1.2 : les scores de juillet ne se comparent pas directement à ceux d’octobre.
  4. Ce classement mesure le chat/agent/reasoning — pas la vision, l’audio ni la capacité locale.

Prochaines étapes

  • Rafraîchir mensuellement.
  • Intégrer l’Open LLM Leaderboard v3 dès son rétablissement.
  • Ajouter une colonne « souveraineté » (USA / Chine / EU).

Données Arena : snapshot arrêté au 08/10/2026 (Text et Agent). Prix API publics à date. Méthodologie en source ouverte — réutilisable et auditable.

Recherche, analyse et rédaction assistées par IA ; direction, réflexion critique et responsabilité éditoriale : Olivier Ricot. Rédaction : Claude Opus 5.5.

Historique des versions

  • v1.2.1 — 2026-10-12 : Deux corrections : en Agent, la variante retenue est celle au résultat le plus sûr (Opus 5.5 « high » et non « max », dont la marge d'erreur est deux fois plus large) ; deux modèles au même score sont départagés par leurs points au classement général de l'Arena. Claude Opus 5.5 passe seul en tête, Gemini 4 Argon 2e. Mistral Large 4 porte son surnom, « Le Chonk ».
  • v1.2 — 2026-10-12 : Méthode corrigée : rangs pris parmi les 38 modèles comparés (même poids pour chaque catégorie), ex aequo quand les marges d'erreur de l'Arena se chevauchent, non testé compté dernier ; critère d'entrée (5 000 votes ou fourchette de rang de 10 places) ; tableau des challengers ; anciennes versions non classées ; trois premiers de chaque catégorie surlignés. Gemini 4 Argon entre, ex aequo avec Claude Opus 5.5.
  • v1.1.4 — 2026-10-12 : Le Meta-Score redevient le seul top 10 ; les meilleurs de chaque catégorie écartés par la sélection passent dans un tableau à part, sans score ; ajout de la date de sortie des modèles.
  • v1.1.3 — 2026-10-12 : Le tableau du Meta-Score montre les trois premiers de chaque catégorie, y compris ceux que la sélection écarte (sans rang) ; cartes de podium retirées. Rangs inchangés.
  • v1.1.2 — 2026-10-12 : Refonte de la page : classements complets en tête ; évolution depuis juillet à côté de chaque modèle ; relevés passés consultables ; méthode dessous ; tableaux lisibles sur téléphone. Chiffres du classement inchangés.
  • v1.1.1 — 2026-10-12 : Ajout d'une mention de conflit d'intérêts : le rédacteur, Claude Opus 5.5, figure dans le classement.
  • v1.1 — 2026-10-12 : Mise à jour d'octobre. Données Arena arrêtées au 08/10/2026. Une ligne par modèle (meilleure variante). Rédaction : Claude Opus 5.5.
  • v1.0 — 2026-07-12 : Première publication. Données Arena collectées le 10/07/2026. Rédaction : DeepSeek V4 Pro.

Rédaction par IA (Claude Opus 5.5) · direction et responsabilité éditoriale : Olivier Ricot. Traçabilité du rédacteur : dépôt de traçabilité (lien à brancher).