跳到正文
评测来源

OTIS Mock AIME 2024–2025

Epoch AI / 推理 · 高中数学竞赛难度的模拟 AIME 题

官方评测
在 AIDC热点 中参与排名
证据预算1.2%
上游数据时间10/16 02:52
最近成功同步10/16 14:05

它测什么,怎么测

只取 Epoch 自行复跑的 mean_score,保留推理档位与标准误。题目来自 OTIS 模拟 AIME 2024–2025,答案为整数,可自动判分。

如何使用这份证据

正式计分(方法 v16 起);与 FrontierMath 同属数学,但难度和题型不同,单列一个题目家族。

评测成绩

按固定规则,每个公开模型采用一套代表配置。匿名测试型号不展示,保留原榜名次,每项最多 30 个。

原榜名次原榜型号原始成绩代表配置
1qwen3.8-max-0902_xhighAlibaba100.0%xHigh 推理
1claude-opus-5-5_maxAnthropic100.0%Max 推理
1gemini-4-argon_highGoogle100.0%High 推理
1claude-fable-5-1_maxAnthropic100.0%Max 推理
1claude-sonnet-5-5_maxAnthropic100.0%Max 推理
1gpt-6-sol_maxOpenAI100.0%Max 推理
1gpt-5.6-sol_maxOpenAI100.0%Max 推理
1gpt-6.1-sol_maxOpenAI100.0%Max 推理
1gpt-6-astra_maxOpenAI100.0%Max 推理
13claude-fable-5_maxAnthropic99.7%Max 推理
13gpt-5.6-terra_maxOpenAI99.7%Max 推理
15qwen3.8-max_xhighAlibaba99.4%xHigh 推理
15muse-wonder-1.0_maxMeta99.4%Max 推理
17muse-spark-1.3_xhighMeta99.2%xHigh 推理
17grok-4.6_xhighxAI99.2%xHigh 推理
19gemini-3.8-flash_highGoogle98.9%High 推理
19claude-haiku-5-5_xhighAnthropic98.9%xHigh 推理
19claude-opus-5_maxAnthropic98.9%Max 推理
19gpt-6-luna_maxOpenAI98.9%Max 推理
23deepseek-v4-pro-0813_maxDeepSeek98.6%Max 推理
24mistral-large-4-0_highMistral AI98.3%High 推理
24deepseek-v4.1-flash_maxDeepSeek98.3%Max 推理
24gpt-5.6-luna_maxOpenAI98.3%Max 推理
24claude-opus-4-8_maxAnthropic98.3%Max 推理
28grok-4.7_xhighxAI98.1%xHigh 推理
28Muse-Spark-Open-816B-A42B_xhighMeta98.1%xHigh 推理
31grok-4.5_highxAI97.8%High 推理
37gemini-3.7-flash_highGoogle97.2%High 推理
37kimi-k3_maxMoonshot AI97.2%Max 推理
40deepseek-v4-pro_maxDeepSeek96.7%Max 推理
评测局限与数据署名

竞赛题已有大量公开训练材料,前沿模型分数接近上限,主要区分中上游模型。

数据许可:CC BY 4.0 · Epoch AI 自行评测数据

成绩由 Epoch AI 发布,原始分数与 AIDC热点 共识分使用不同尺度,不能直接相加。