o1
OpenAI · o1-2024-12-17 · United States of America · 上线 2024-12-17
—不在当前榜上
142Epoch ECI
1402网友盲测分(全球第 161)
10有成绩的基准
这个模型上线超过一年(或没有上线日期),所以没有名次;ECI 是 Epoch 给的。
相对薄弱
- FrontierMath-Tiers-1-3-v2-Private:第 80 / 84 名(成绩 14.7%)
- Chess Puzzles:第 73 / 81 名(成绩 10.0%)
各基准成绩
| 基准 | 成绩 | 名次 | 超过了多少模型 |
|---|---|---|---|
| SimpleQA Verified | 41.1% | 47 / 81 | |
| WeirdML | 46.1% | 55 / 89 | |
| OTIS Mock AIME 2024-2025 | 73.3% | 84 / 118 | |
| GPQA diamond | 76.8% | 86 / 117 | |
| SimpleBench | 40.1% | 47 / 60 | |
| DTBench | 74.7% | 88 / 109 | |
| LMCA | 22.3% | 90 / 104 | |
| ARC-AGI | 30.7% | 69 / 79 | |
| Chess Puzzles | 10.0% | 73 / 81 | |
| FrontierMath-Tiers-1-3-v2-Private | 14.7% | 80 / 84 |
成绩是该模型在最佳推理强度下的结果;名次只在已评分的模型里比。