o1: बेंचमार्क और रैंकिंग
o1 (OpenAI) — कुल रैंक: #116 / 153, कुल स्कोर: 25.2 (90% अंतराल 18.3–33.6), लीडरबोर्ड: 3। रिलीज़: 2024-09-12 · कीमत (इनपुट/आउटपुट): $16.5 / $66
हर लीडरबोर्ड पर रैंक
| लीडरबोर्ड | रैंक | प्रकाशित मान |
|---|---|---|
| Artificial Analysis | रेट नहीं | — |
| LiveBench | रेट नहीं | — |
| Epoch AI | #112 / 230 | 141.16 |
| ARC Prize (ARC-AGI) | रेट नहीं | — |
| Scale AI SEAL | #33 / 44 | 7.96 |
| Vals AI | रेट नहीं | — |
| Terminal-Bench | रेट नहीं | — |
| EQ-Bench | रेट नहीं | — |
| SimpleBench | #74 / 112 | 41.7 |
| BenchLM.ai | रेट नहीं | — |
क्षेत्र स्कोर
- कोडिंग: 36.0
- रीज़निंग: 31.1
- गणित: 46.5
- ज्ञान: 49.0
- लेखन: 44.2
- निर्देश पालन: 37.7
- चैट और EQ: 24.1
- व्यवसाय: 57.8
- जापानी: 62.7
- विज़न: 22.9