Aller au contenu
AIRank
← Benchmarks

MATH

18 modèles classés

Le benchmark MATH est un ensemble de 5 000 problèmes de mathématiques de niveau compétition dans 7 domaines, de l’algèbre et du dénombrement à la théorie des nombres et à la pré-analyse. Il teste non seulement le calcul mais le raisonnement pas à pas, puisque les problèmes ne sont notés que sur la réponse finale. Il reste le signal de référence pour mesurer la réflexion réelle d’un modèle — plutôt que sa mémorisation.

Scores de Hugging Face

#Modèle
1GPT-595
2Claude 4 Opus94
3Gemini 2.5 Pro93
4Cursor Tab92
5Llama 4 405B91
6Claude Code91
7Grok 390
8Qwen3 235B89
9DeepSeek V388
10GitHub Copilot88
11Mistral Large 387
12Claude 4 Sonnet86
13Aider85
14Command R+84
15Codeium Windsurf84
16Gemini 2.5 Flash83
17GPT-4o mini81
18Continue Dev80

AIRank agrège ces résultats à partir des sources publiques indiquées sur chaque page. Nous ne menons pas nos propres évaluations et normalisons les résultats bruts sur une échelle de 0 à 100 pour que les tableaux soient comparables.

FAQ

Questions fréquentes

Qu’est-ce que MATH ?

Le benchmark MATH est un ensemble de 5 000 problèmes de mathématiques de niveau compétition dans 7 domaines, de l’algèbre et du dénombrement à la théorie des nombres et à la pré-analyse. Il teste non seulement le calcul mais le raisonnement pas à pas, puisque les problèmes ne sont notés que sur la réponse finale. Il reste le signal de référence pour mesurer la réflexion réelle d’un modèle — plutôt que sa mémorisation. Les résultats MATH présentés ici proviennent des scores publics publiés par l’équipe du benchmark et ré-agrégés via des sources comme Hugging Face.

Comment les scores des benchmarks sont-ils calculés ?

Chaque benchmark publie ses résultats sur son échelle native — pourcentages, taux pass@1 ou points Elo. Nous normalisons chaque benchmark sur une échelle commune de 0 à 100 grâce à une mise à l’échelle min-max sur les modèles suivis, afin que les tableaux soient comparables d’un benchmark à l’autre. Les chiffres proviennent toujours des résultats publics publiés par les équipes des benchmarks, jamais d’évaluations propriétaires ou auto-réalisées.

Pourquoi les mêmes modèles sont-ils classés différemment selon les benchmarks ?

Les benchmarks mesurent des compétences différentes. GPQA teste la connaissance scientifique de niveau postuniversitaire, HumanEval et SWE-Bench mesurent la capacité de codage, et MATH couvre la résolution de problèmes pas à pas. Un modèle peut exceller en code tout en étant moyen en sciences — c’est précisément pourquoi nous conservons un classement distinct pour chaque benchmark plutôt que de tout fusionner en un seul score.