o1: benchmarks y ranking
o1 (OpenAI) — puesto general: #104 / 138, puntuación general: 27.8 (Intervalo del 90 % 21.4–35.2), leaderboards: 4. Lanzamiento: 2024-09-12 · Precio (entrada/salida): $16.5 / $66
Puesto en cada leaderboard
| Leaderboard | Puesto | Valor publicado |
|---|---|---|
| Artificial Analysis | Sin evaluar | — |
| LiveBench | Sin evaluar | — |
| Epoch AI | #95 / 239 | 141.92 |
| ARC Prize (ARC-AGI) | Sin evaluar | — |
| Scale AI SEAL | #31 / 42 | 7.96 |
| Vals AI | Sin evaluar | — |
| Terminal-Bench | Sin evaluar | — |
| EQ-Bench | Sin evaluar | — |
| SimpleBench | #61 / 99 | 41.7 |
| BenchLM.ai | #63 / 74 | 36.32 |
Puntuación por área
- Programación: 25.1
- Razonamiento: 31.1
- Matemáticas: 44.8
- Conocimiento: 51.4
- Escritura: 41.4
- Instrucciones: 30.6
- Chat e IE: 24.8
- Negocios: 55.6
- Japonés: 61.0