o1: benchmarks y ranking
o1 (OpenAI) — puesto general: #116 / 153, puntuación general: 25.2 (Intervalo del 90 % 18.3–33.6), leaderboards: 3. Lanzamiento: 2024-09-12 · Precio (entrada/salida): $16.5 / $66
Puesto en cada leaderboard
| Leaderboard | Puesto | Valor publicado |
|---|---|---|
| Artificial Analysis | Sin evaluar | — |
| LiveBench | Sin evaluar | — |
| Epoch AI | #112 / 230 | 141.16 |
| ARC Prize (ARC-AGI) | Sin evaluar | — |
| Scale AI SEAL | #33 / 44 | 7.96 |
| Vals AI | Sin evaluar | — |
| Terminal-Bench | Sin evaluar | — |
| EQ-Bench | Sin evaluar | — |
| SimpleBench | #74 / 112 | 41.7 |
| BenchLM.ai | Sin evaluar | — |
Puntuación por área
- Programación: 36.0
- Razonamiento: 31.1
- Matemáticas: 46.5
- Conocimiento: 49.0
- Escritura: 44.2
- Instrucciones: 37.7
- Chat e IE: 24.1
- Negocios: 57.8
- Japonés: 62.7
- Visión: 22.9