LiveBench
18 modèles classés
LiveBench est un benchmark résistant à la contamination, publié en continu par Abacus AI, avec de nouveaux ensembles de questions diffusés selon un calendrier fixe pour que les modèles ne puissent pas s’entraîner sur des réponses fuitées. Il note 23 tâches objectives dans sept catégories — raisonnement, code, mathématiques, analyse de données, langage et plus — où chaque réponse est vérifiable par code, et non par un juge IA.
Scores de LiveBench
| # | Modèle | ||
|---|---|---|---|
| 1 | GPT-5 | OpenAI | 99 |
| 2 | Claude 4 Opus | Anthropic | 98 |
| 3 | Gemini 2.5 Pro | 97 | |
| 4 | Cursor Tab | Anysphere | 96 |
| 5 | Llama 4 405B | Meta | 95 |
| 6 | Claude Code | Anthropic | 95 |
| 7 | Grok 3 | xAI | 94 |
| 8 | Qwen3 235B | Alibaba | 93 |
| 9 | DeepSeek V3 | DeepSeek | 92 |
| 10 | GitHub Copilot | GitHub | 92 |
| 11 | Mistral Large 3 | Mistral | 91 |
| 12 | Claude 4 Sonnet | Anthropic | 90 |
| 13 | Aider | Aider | 89 |
| 14 | Command R+ | Cohere | 88 |
| 15 | Codeium Windsurf | Codeium | 88 |
| 16 | Gemini 2.5 Flash | 87 | |
| 17 | GPT-4o mini | OpenAI | 85 |
| 18 | Continue Dev | Continue | 84 |
AIRank agrège ces résultats à partir des sources publiques indiquées sur chaque page. Nous ne menons pas nos propres évaluations et normalisons les résultats bruts sur une échelle de 0 à 100 pour que les tableaux soient comparables.
FAQ
Questions fréquentes
Qu’est-ce que LiveBench ?
LiveBench est un benchmark résistant à la contamination, publié en continu par Abacus AI, avec de nouveaux ensembles de questions diffusés selon un calendrier fixe pour que les modèles ne puissent pas s’entraîner sur des réponses fuitées. Il note 23 tâches objectives dans sept catégories — raisonnement, code, mathématiques, analyse de données, langage et plus — où chaque réponse est vérifiable par code, et non par un juge IA. Les résultats LiveBench présentés ici proviennent des scores publics publiés par l’équipe du benchmark et ré-agrégés via des sources comme LiveBench.
Comment les scores des benchmarks sont-ils calculés ?
Chaque benchmark publie ses résultats sur son échelle native — pourcentages, taux pass@1 ou points Elo. Nous normalisons chaque benchmark sur une échelle commune de 0 à 100 grâce à une mise à l’échelle min-max sur les modèles suivis, afin que les tableaux soient comparables d’un benchmark à l’autre. Les chiffres proviennent toujours des résultats publics publiés par les équipes des benchmarks, jamais d’évaluations propriétaires ou auto-réalisées.
Pourquoi les mêmes modèles sont-ils classés différemment selon les benchmarks ?
Les benchmarks mesurent des compétences différentes. GPQA teste la connaissance scientifique de niveau postuniversitaire, HumanEval et SWE-Bench mesurent la capacité de codage, et MATH couvre la résolution de problèmes pas à pas. Un modèle peut exceller en code tout en étant moyen en sciences — c’est précisément pourquoi nous conservons un classement distinct pour chaque benchmark plutôt que de tout fusionner en un seul score.