GPQA
18 modelos clasificados
GPQA es un benchmark de opción múltiple creado por Google DeepMind con 448 preguntas científicas de nivel de posgrado en física, química y biología. Su nombre indica que las preguntas son tan difíciles que los buscadores no pueden responderlas, lo que protege al benchmark de la contaminación. La puntuación refleja con qué frecuencia un modelo responde correctamente a estas preguntas de expertos.
Puntuaciones de Hugging Face
| # | Modelo | ||
|---|---|---|---|
| 1 | GPT-5 | OpenAI | 99 |
| 2 | Claude 4 Opus | Anthropic | 98 |
| 3 | Gemini 2.5 Pro | 97 | |
| 4 | Cursor Tab | Anysphere | 96 |
| 5 | Llama 4 405B | Meta | 95 |
| 6 | Claude Code | Anthropic | 95 |
| 7 | Grok 3 | xAI | 94 |
| 8 | Qwen3 235B | Alibaba | 93 |
| 9 | DeepSeek V3 | DeepSeek | 92 |
| 10 | GitHub Copilot | GitHub | 92 |
| 11 | Mistral Large 3 | Mistral | 91 |
| 12 | Claude 4 Sonnet | Anthropic | 90 |
| 13 | Aider | Aider | 89 |
| 14 | Command R+ | Cohere | 88 |
| 15 | Codeium Windsurf | Codeium | 88 |
| 16 | Gemini 2.5 Flash | 87 | |
| 17 | GPT-4o mini | OpenAI | 85 |
| 18 | Continue Dev | Continue | 84 |
AIRank agrega estos resultados de las fuentes públicas indicadas en cada página. No realizamos evaluaciones propias y normalizamos los resultados brutos a una escala de 0 a 100 para que las tablas sean comparables.
FAQ
Preguntas frecuentes
¿Qué es GPQA?
GPQA es un benchmark de opción múltiple creado por Google DeepMind con 448 preguntas científicas de nivel de posgrado en física, química y biología. Su nombre indica que las preguntas son tan difíciles que los buscadores no pueden responderlas, lo que protege al benchmark de la contaminación. La puntuación refleja con qué frecuencia un modelo responde correctamente a estas preguntas de expertos. Los resultados de GPQA mostrados aquí provienen de las puntuaciones públicas publicadas por el propio equipo del benchmark y se agregan a través de fuentes como Hugging Face.
¿Cómo se calculan las puntuaciones de los benchmarks?
Cada benchmark informa de sus resultados en su propia escala nativa: porcentajes, tasas pass@1 o puntos Elo. Normalizamos cada benchmark a una escala común de 0 a 100 mediante escalado min-max sobre los modelos que seguimos, para que las tablas sean comparables entre benchmarks. Los números subyacentes provienen siempre de los resultados públicos publicados por los responsables del benchmark, nunca de evaluaciones propias o privadas.
¿Por qué los mismos modelos ocupan puestos distintos en distintos benchmarks?
Los benchmarks miden habilidades distintas. GPQA evalúa conocimientos científicos de posgrado, HumanEval y SWE-Bench miden la capacidad de programar y MATH cubre la resolución de problemas paso a paso. Un modelo puede ser excelente en código y mediocre en ciencias — por eso mantenemos una clasificación separada para cada benchmark en lugar de fusionarlo todo en una sola puntuación.