o1 : benchmarks et classement
o1 (OpenAI) — rang global : #116 / 153, score global : 25.2 (Intervalle à 90 % 18.3–33.6), leaderboards : 3. Sortie: 2024-09-12 · Prix (entrée/sortie): $16.5 / $66
Rang sur chaque leaderboard
| Leaderboard | Rang | Valeur publiée |
|---|---|---|
| Artificial Analysis | Non évalué | — |
| LiveBench | Non évalué | — |
| Epoch AI | #112 / 230 | 141.16 |
| ARC Prize (ARC-AGI) | Non évalué | — |
| Scale AI SEAL | #33 / 44 | 7.96 |
| Vals AI | Non évalué | — |
| Terminal-Bench | Non évalué | — |
| EQ-Bench | Non évalué | — |
| SimpleBench | #74 / 112 | 41.7 |
| BenchLM.ai | Non évalué | — |
Scores par domaine
- Code: 36.0
- Raisonnement: 31.1
- Mathématiques: 46.5
- Connaissances: 49.0
- Écriture: 44.2
- Consignes: 37.7
- Dialogue et IE: 24.1
- Entreprise: 57.8
- Japonais: 62.7
- Vision: 22.9