Claude 3 Opus
Anthropic · claude-3-opus-20240229 · United States of America · 上线 2024-02-29
—不在当前榜上
127Epoch ECI
1322网友盲测分(全球第 261)
8有成绩的基准
这个模型上线超过一年(或没有上线日期),所以没有名次;ECI 是 Epoch 给的。
相对薄弱
- Chess Puzzles:第 77 / 81 名(成绩 3.0%)
- OTIS Mock AIME 2024-2025:第 114 / 118 名(成绩 4.7%)
各基准成绩
| 基准 | 成绩 | 名次 | 超过了多少模型 |
|---|---|---|---|
| SimpleBench | 23.5% | 55 / 60 | |
| DTBench | 61.6% | 100 / 109 | |
| LMCA | 17.0% | 96 / 104 | |
| SimpleQA Verified | 12.6% | 76 / 81 | |
| WeirdML | 19.2% | 84 / 89 | |
| GPQA diamond | 47.2% | 112 / 117 | |
| OTIS Mock AIME 2024-2025 | 4.7% | 114 / 118 | |
| Chess Puzzles | 3.0% | 77 / 81 |
成绩是该模型在最佳推理强度下的结果;名次只在已评分的模型里比。