GPQA Diamond
Epoch AI / Connaissance · Connaissances en physique, chimie et biologie de niveau master
Ce qu'il mesure, comment il le mesure
On ne retient que le mean des réexécutions propres à Epoch_score, Conserve le niveau de raisonnement et l'erreur standard. Les 198 questions de connaissances scientifiques demandent du raisonnement, mais ne représentent pas l'ensemble des connaissances du monde.
Comment utiliser ces preuves
Après vérification via le protocole mono-modèle, participe au classement de référence dans la limite de la part de la famille de questions du domaine de compétence concerné ; les mesures d'une même famille de questions n'augmentent pas la part totale de la famille. La part effective figure dans l'enregistrement de calcul en cours.
Scores d'évaluation
Selon des règles fixes, chaque modèle public utilise une configuration représentative ; les modèles sans configuration admissible sont marqués comme non pris en compte, avec la raison indiquée. Les modèles testés de façon anonyme ne sont pas affichés, leur rang d'origine est conservé, avec un maximum de 30 par entrée.
| Rang sur le classement d'origine | Modèle au classement d'origine | Score brut | Configuration de référence |
|---|---|---|---|
| 1 | gpt-6-astra_maxOpenAI | 95.8% | Max « inférence » |
| 2 | claude-sonnet-5-5_maxAnthropic | 95.6% | Max « inférence » |
| 3 | gpt-6.1-sol_maxOpenAI | 95.4% | Max « inférence » |
| 3 | gemini-3.8-flash_highGoogle | 95.4% | High « inférence » |
| 5 | gemini-3.7-flash_highGoogle | 94.8% | High « inférence » |
| 6 | gpt-5.4-pro-2026-03-05_xhighOpenAI | 94.6% | xHigh « inférence » |
| 7 | gemini-3.1-pro-preview_highGoogle | 94.4% | High « inférence » |
| 8 | gpt-6-sol_maxOpenAI | 94.3% | Max « inférence » |
| 9 | gemini-3.6-flash_highGoogle | 94.1% | High « inférence » |
| 11 | gpt-5.5-pre-release_xhighOpenAI | 94.0% | xHigh « inférence »Non pris en compte :La source indique explicitement une version préliminaire, elle ne représente pas un modèle de production utilisable. |
| 13 | gpt-5.5-pro-pre-release_xhighOpenAI | 93.9% | xHigh « inférence »Non pris en compte :La source indique explicitement une version préliminaire, elle ne représente pas un modèle de production utilisable. |
| 14 | claude-opus-5_maxAnthropic | 93.9% | Max « inférence » |
| 15 | gpt-5.6-sol_maxOpenAI | 93.5% | Max « inférence » |
| 16 | grok-4.5_highxAI | 93.4% | High « inférence » |
| 17 | gpt-5.6-terra_maxOpenAI | 93.3% | Max « inférence » |
| 18 | gpt-5.4-2026-03-05_xhighOpenAI | 93.3% | xHigh « inférence » |
| 19 | grok-4.6_xhighxAI | 93.2% | xHigh « inférence » |
| 20 | kimi-k3_maxMoonshot AI | 93.1% | Max « inférence » |
| 22 | gemini-3.5-flash_highGoogle | 92.8% | High « inférence » |
| 23 | grok-4.7_xhighxAI | 92.7% | xHigh « inférence » |
| 24 | qwen3.8-max_xhighAlibaba | 92.7% | xHigh « inférence » |
| 25 | gemini-3-pro-previewGoogle | 92.6% | Configuration par défaut de la source |
| 26 | qwen3.8-max-0902_xhighAlibaba | 92.3% | xHigh « inférence » |
| 28 | glm-5.2_maxZ.ai | 91.9% | Max « inférence » |
| 29 | deepseek-v4-pro-0813_maxDeepSeek | 91.7% | Max « inférence » |
| 30 | gpt-5.6-luna_maxOpenAI | 91.6% | Max « inférence » |
| 31 | gpt-5.2-2025-12-11_xhighOpenAI | 91.4% | xHigh « inférence » |
| 32 | deepseek-v4-flash-0731_maxDeepSeek | 91.0% | Max « inférence » |
| 32 | claude-opus-4-8_maxAnthropic | 91.0% | Max « inférence » |
| 34 | glm-5.3_maxZ.ai | 90.9% | Max « inférence » |
Limites de l'évaluation et attribution des données
Comptabilisé dans le score officiel ; une même famille de questions partage un budget fixe.
Licence des données :CC BY 4.0 · Epoch AI données d'évaluation propres
Résultats publiés par Epoch AI ; les scores bruts de chaque épreuve utilisent des échelles différentes et ne peuvent pas être additionnés directement ; le rang de référence applique des règles publiques de normalisation des écarts.