Skip to content
benchmark sources

OTIS Mock AIME 2024–2025

This page's content is in Chinese.

Epoch AI / 推理 · 高中数学竞赛难度的模拟 AIME 题

Official benchmark
In AIDC热点Ranked
Evidence budget1.2%
Upstream data time11/03 04:57
Last successful sync11/04 14:05

What it measures and how

只取 Epoch 自行复跑的 mean_score,保留推理档位与标准误。题目来自 OTIS 模拟 AIME 2024–2025,答案为整数,可自动判分。

How to use this evidence

正式计分(方法 v16 起);与 FrontierMath 同属数学,但难度和题型不同,单列一个题目家族。

Benchmark results

按固定规则,每个公开模型采用一套代表配置。匿名测试型号不展示,保留原榜名次,每项最多 30 个。

Original board rankOriginal board modelRaw resultRepresentative config
1gpt-5.6-sol_maxOpenAI100.0%Max 推理
1gpt-6-astra_maxOpenAI100.0%Max 推理
1claude-sonnet-5-5_maxAnthropic100.0%Max 推理
1gpt-6.1-sol_maxOpenAI100.0%Max 推理
1claude-fable-5-1_maxAnthropic100.0%Max 推理
1claude-opus-5-5_maxAnthropic100.0%Max 推理
1gpt-6.1-terra_maxOpenAI100.0%Max 推理
1gpt-6-sol_maxOpenAI100.0%Max 推理
1gemini-4-argon_highGoogle100.0%High 推理
1qwen3.8-max-0902_xhighAlibaba100.0%xHigh 推理
14claude-fable-5_maxAnthropic99.7%Max 推理
14gpt-5.6-terra_maxOpenAI99.7%Max 推理
16muse-wonder-1.0_maxMeta99.4%Max 推理
16qwen3.8-max_xhighAlibaba99.4%xHigh 推理
16mistral-large-4-0-oss_highMistral AI99.4%High 推理
16deepseek-v4.1-flash-1017_maxDeepSeek99.4%Max 推理
20grok-4.6_xhighxAI99.2%xHigh 推理
20doubao-seed-evolving_highByteDance99.2%High 推理
20muse-spark-1.3_xhighMeta99.2%xHigh 推理
23gemini-3.8-flash_highGoogle98.9%High 推理
23claude-opus-5_maxAnthropic98.9%Max 推理
23gpt-6-luna_maxOpenAI98.9%Max 推理
23claude-haiku-5-5_xhighAnthropic98.9%xHigh 推理
27deepseek-v4-pro-0813_maxDeepSeek98.6%Max 推理
28deepseek-v4.1-flash_maxDeepSeek98.3%Max 推理
28mistral-large-4-0_highMistral AI98.3%High 推理
28gpt-5.6-luna_maxOpenAI98.3%Max 推理
28claude-opus-4-8_maxAnthropic98.3%Max 推理
32Muse-Spark-Open-816B-A42B_xhighMeta98.1%xHigh 推理
32grok-4.7_xhighxAI98.1%xHigh 推理
Benchmark limits and data attribution

竞赛题已有大量公开训练材料,前沿模型分数接近上限,主要区分中上游模型。

Data license:CC BY 4.0 · Epoch AI 自行评测数据

成绩由 Epoch AI 发布,原始分数与 AIDC热点 共识分使用不同尺度,不能直接相加。