Comparaison de modèles d'IA / Le bureau de décision
Mieux en quoi ?
Choisissez une tâche. Inspectez les preuves. Comparez les compromis. Une liste restreinte de modèles pratiques commence par le travail que vous devez effectuer.
Instantané source 12 oct. 2026
01 / Commencer la tâche
Différents tests. Différentes forces.
Moyennes les plus élevées observées dans six tableaux de référence Epoch AI. Ce sont des résultats sources, pas des tests Rubrex ou des gagnants universels. Les paramètres de couverture et d’évaluation varient.
01 / Codage à long horizon↗
Claude Opus 5.5 (maximum)
77.4%MiroirCode Score moyen · ± 8.3 points de pourcentage — erreur standard
Réimplémentez des programmes complets à partir de leur comportement et de leur documentation.
Exécution démarrée : .
Utilise un budget d'agent important : jusqu'à sept jours et 10 milliards de jetons par tentative. Il ne s’agit pas d’un test rapide d’assistant de codage.
Répondez à de courtes questions factuelles, notées à l’aide de la mesure de proportionnalité correcte d’Epoch AI.
Exécution démarrée : .
Epoch encourage une meilleure estimation dans cette configuration. Il ne s’agit ni d’un taux d’hallucination, ni d’un test d’abstention utile ou d’un RAG de document privé.
Suivez les progrès dans l’environnement de jeu Earthborne Rangers.
Exécution démarrée : .
Les performances des agents de jeu sont un signal étroit. Il ne mesure pas directement l’achèvement du flux de travail métier ou l’autorisation des outils.
Résolvez les problèmes logiciels dans le cadre de la configuration d’évaluation d’Epoch AI.
Exécution démarrée : .
Cette source a une couverture limitée des modèles récents. Les échafaudages d'agents, les budgets et les sous-ensembles d'évaluation peuvent différer des autres classements SWE-bench.
Dans cet instantané, Claude Opus 5.5 (maximum) a la moyenne la plus élevée observée sur MirrorCode ; GPT-6 Astra (maximum) dirige les courses GPQA Diamond incluses. Utilisez les résultats spécifiques aux tâches ci-dessous pour sélectionner les candidats, puis testez-les sur vos propres exemples avec un budget fixe.
02 / Explorer les preuves
Comparez au sein du même test.
MiroirCode
Réimplémentez des programmes complets à partir de leur comportement et de leur documentation. Utilise un budget d'agent important : jusqu'à sept jours et 10 milliards de jetons par tentative. Il ne s’agit pas d’un test rapide d’assistant de codage.
Affichage 9 de 9 exécutions d’évaluation correspondantes. Classé par score moyen, le plus élevé en premier. ± est une erreur type en points de pourcentage, le cas échéant.
Faites défiler le tableau horizontalement sur des écrans plus petits.
MiroirCode: Évaluations internes d’Epoch AI
Modèle et réglage
Score moyen
Erreur standard
Exécution démarrée
Claude Opus 5.5 (maximum)Anthropique
77.4%
± 8.3 points de pourcentage
22 sept. 2026
Claude Fable 5.1 (haut)Anthropique
73.3%
± 9,2 pages
10 sept. 2026
Claude Fable 5 (haut)Anthropique
63.9%
± 10,4 pages
10 août 2026
GPT-6 Astra (haut)OpenAI
46.7%
± 11.9 points de pourcentage
30 août 2026
Claude Opus 4.7 (haut)Anthropique
31.1%
± 9,0 pages
12 août 2026
GPT-5.6 Sol (élevé)OpenAI
20.0%
± 9,2 pages
10 août 2026
GPT-5.4 (élevé)OpenAI
15.6%
± 7,7 pages
10 août 2026
GPT-5.5 (élevé)OpenAI
10.0%
± 6,0 pages
10 août 2026
Aperçu de Gemini 3.1 ProGoogle DeepMind
8.9%
± 4,6 pages
10 août 2026
03 / Construisez votre shortlist
Deux modèles. Six questions différentes.
Comparez les familles modèles en utilisant leur score moyen observé le plus élevé dans chaque test. Le paramètre exact apparaît sous chaque résultat. Cette vision n’égalise pas l’effort de raisonnement ni les budgets de calcul.
Claude Opus 5.5Aucun résultatManquant dans cet instantané source
GPT-6 AstraAucun résultatManquant dans cet instantané source
Un score manquant est inconnu et non nul. Des moyennes plus élevées peuvent avoir des incertitudes qui se chevauchent. Ces résultats sont un signal de présélection et non une preuve de supériorité sur votre charge de travail.
04/ Rendre le budget explicite
Combien coûteraient les jetons ?
Un échantillon daté du catalogue public d’OpenRouter. Les prix sont en USD par million de jetons au niveau de base indiqué. L'exemple utilise 10 000 jetons d'entrée et 2 000 jetons de sortie facturés au total pour une requête.
Faites défiler le tableau horizontalement sur des écrans plus petits.
Prix catalogue OpenRouter, indépendants du benchmark ci-dessus
Il s’agit d’une estimation symbolique et non du coût par tâche réussie. Des jetons de raisonnement supplémentaires, des tentatives, des outils, des recherches, des médias, des différences de routage/fournisseur et des niveaux de contexte plus élevés peuvent modifier la facture. Les remises sur le cache et les lots sont exclues. Vérifiez la liste des modèles liés avant l'achat.
05 / Preuves traçables
Sachez ce que signifient les chiffres.
Une source pour les scores de référence
222 Les familles modèles apparaissent dans ces six tableaux. Nous importons les scores moyens internes d’Epoch AI, conservons les paramètres exacts et affichons les erreurs standard fournies. Nous convertissons les fractions en pourcentages et trions les résultats. Nous ne calculons pas la moyenne des indices de référence non liés pour établir une nouvelle notation.
Sources récupérées 12 oct. 2026. Il s'agit d'un instantané enregistré, pas d'un flux en direct. La date d'exécution dans chaque ligne peut être antérieure à la date de téléchargement. Les nouveaux modèles entrent dans différents tests à des moments différents ; un résultat manquant ne signifie pas de mauvaises performances.
Les efforts de raisonnement, les outils, les échafaudages et les budgets de calcul affectent les résultats. Un petit écart entre les scores moyens ne constitue pas un test de signification statistique. Avant de changer de modèle, évaluez la réussite des tâches, la latence résiduelle, la gravité des pannes et le coût total dans vos propres conditions de fonctionnement.
La vitesse et les préférences nécessitent un autre objectif
Ces tableaux de référence ne mesurent pas la vitesse de l'API ni les préférences de l'utilisateur. L'analyse artificielle fournit des comparaisons de performances ; Arena propose des comparaisons basées sur les préférences. Leurs tests répondent à des questions différentes, leurs numéros ne sont donc pas fusionnés dans ce tableau.
Données de référence : Epoch AI, capacités et analyse comparative, utilisé sous CC PAR 4.0. Sélectionné, reformaté et converti en pourcentages par Rubrex. Les créateurs et méthodes de référence originaux sont liés dans chaque catégorie. Aucune approbation n’est implicite. Données de prix de l'API : Catalogue de modèles publics OpenRouter, récupéré à la même date.
L'exportation source peut changer après cet instantané. Nous ne publions aucun classement sponsorisé par le fournisseur et ne prétendons pas que ces scores établissent la fiabilité de la production.
Avant de choisir
Quelques réponses utiles.
Pourquoi un modèle plus récent manque-t-il dans certains tests ?
L’évaluation indépendante prend du temps et chaque benchmark couvre un ensemble différent de modèles. Nous laissons les résultats manquants vides. Nous ne déduisons pas de score d'un autre modèle de la même famille ou d'une réclamation de lancement.
Le modèle le moins cher offre-t-il le meilleur rapport qualité-prix ?
Seulement s’il répond à votre barre de qualité. Comparez le coût par tâche réussie, y compris les tentatives et l'examen humain. Un prix symbolique faible peut néanmoins produire un flux de travail coûteux.
Ces résultats peuvent-ils choisir un modèle pour RAG ou un support client ?
Ils peuvent aider à établir une liste restreinte. Vous avez toujours besoin de documents représentatifs, de cas de responsabilité, de vérifications de citations, de limites d'outils et de tests de l'application complète.