Gemini 1.5 Pro: benchmarks y ranking
Gemini 1.5 Pro (Google) — puesto general: #133 / 153, puntuación general: 18.4 (Intervalo del 90 % 13.9–24.0), leaderboards: 4. Lanzamiento: 2024-05-14
Puesto en cada leaderboard
| Leaderboard | Puesto | Valor publicado |
|---|---|---|
| Artificial Analysis | Sin evaluar | — |
| LiveBench | Sin evaluar | — |
| Epoch AI | #140 / 230 | 130.45 |
| ARC Prize (ARC-AGI) | #82 / 95 | 0.8 |
| Scale AI SEAL | #39 / 44 | 4.6 |
| Vals AI | Sin evaluar | — |
| Terminal-Bench | Sin evaluar | — |
| EQ-Bench | Sin evaluar | — |
| SimpleBench | #94 / 112 | 27.1 |
| BenchLM.ai | Sin evaluar | — |
Puntuación por área
- Programación: 19.0
- Razonamiento: 20.4
- Matemáticas: 22.8
- Conocimiento: 40.7
- Escritura: 36.9
- Instrucciones: 16.4
- Chat e IE: 10.8
- Negocios: 47.9
- Japonés: 49.4
- Visión: 18.3