DeepSeek V3: benchmark dan peringkat
DeepSeek V3 (DeepSeek) — peringkat keseluruhan: #143 / 153, skor keseluruhan: 14.8 (Interval 90% 10.1–21.2), leaderboard: 3. Rilis: 2024-12-26 · Harga (input/output): $0.32 / $0.89
Peringkat di tiap leaderboard
| Leaderboard | Peringkat | Nilai yang dipublikasikan |
|---|---|---|
| Artificial Analysis | #116 / 141 | 9.7 |
| LiveBench | Belum dinilai | — |
| Epoch AI | #130 / 230 | 135.25 |
| ARC Prize (ARC-AGI) | Belum dinilai | — |
| Scale AI SEAL | Belum dinilai | — |
| Vals AI | Belum dinilai | — |
| Terminal-Bench | Belum dinilai | — |
| EQ-Bench | Belum dinilai | — |
| SimpleBench | #106 / 112 | 18.9 |
| BenchLM.ai | Belum dinilai | — |
Skor per bidang
- Pemrograman: 21.5
- Agen: 22.8
- Penalaran: 13.7
- Matematika: 30.3
- Pengetahuan: 44.0
- Menulis: 46.4
- Instruksi: 12.3
- Obrolan & EQ: 30.6
- Bisnis: 54.3
- Bahasa Jepang: 55.9
- Konteks panjang: 1.6