Claude 3.5 Haiku
Anthropic · claude-3-5-haiku-20241022 · United States of America · 上线 2024-10-22
—不在当前榜上
127Epoch ECI
1325网友盲测分(全球第 255)
5有成绩的基准
这个模型上线超过一年(或没有上线日期),所以没有名次;ECI 是 Epoch 给的。
相对薄弱
- OTIS Mock AIME 2024-2025:第 115 / 118 名(成绩 4.3%)
- GPQA diamond:第 114 / 117 名(成绩 38.1%)
各基准成绩
| 基准 | 成绩 | 名次 | 超过了多少模型 |
|---|---|---|---|
| Balrog | 19.3% | 15 / 17 | |
| WeirdML | 30.7% | 82 / 89 | |
| DTBench | 56.7% | 103 / 109 | |
| GPQA diamond | 38.1% | 114 / 117 | |
| OTIS Mock AIME 2024-2025 | 4.3% | 115 / 118 |
成绩是该模型在最佳推理强度下的结果;名次只在已评分的模型里比。