Llama 3.1 405B: бенчмарки и рейтинг
Llama 3.1 405B (Meta) — общее место: #149 / 153, общая оценка: 12.9 (90% интервал 7.0–22.5), лидербордов: 2. Выход: 2024-07-23
Место на каждом лидерборде
| Лидерборд | Место | Опубликованное значение |
|---|---|---|
| Artificial Analysis | Нет оценки | — |
| LiveBench | Нет оценки | — |
| Epoch AI | #144 / 230 | 127.92 |
| ARC Prize (ARC-AGI) | Нет оценки | — |
| Scale AI SEAL | Нет оценки | — |
| Vals AI | Нет оценки | — |
| Terminal-Bench | Нет оценки | — |
| EQ-Bench | Нет оценки | — |
| SimpleBench | #99 / 112 | 23 |
| BenchLM.ai | Нет оценки | — |
Оценки по областям
- Программирование: 22.8
- Рассуждение: 14.6
- Математика: 17.8
- Знания: 33.3
- Тексты: 14.1
- Инструкции: 11.5
- Диалог и EQ: 12.6
- Бизнес: 46.3
- Японский: 39.8