o1 Mini: benchmarks e ranking
o1 Mini (OpenAI) — posição geral: #139 / 153, pontuação geral: 16.9 (Intervalo de 90% 11.5–24.2), leaderboards: 3. Lançamento: 2024-09-12
Posição em cada leaderboard
| Leaderboard | Posição | Valor publicado |
|---|---|---|
| Artificial Analysis | Não avaliado | — |
| LiveBench | Não avaliado | — |
| Epoch AI | #129 / 230 | 135.27 |
| ARC Prize (ARC-AGI) | #82 / 95 | 0.8 |
| Scale AI SEAL | Não avaliado | — |
| Vals AI | Não avaliado | — |
| Terminal-Bench | Não avaliado | — |
| EQ-Bench | Não avaliado | — |
| SimpleBench | #108 / 112 | 18.1 |
| BenchLM.ai | Não avaliado | — |
Pontuação por área
- Programação: 24.8
- Raciocínio: 13.7
- Matemática: 32.8
- Conhecimento: 38.5
- Escrita: 17.3
- Instruções: 14.6
- Conversa e IE: 9.8
- Negócios: 43.1
- Japonês: 40.6