Skip to content
benchmark sources

Vending-Bench 2

This page's content is in Chinese.

Andon Labs / 专业办公 · 经营模拟商店一年,处理采购、谈判、库存与定价。

Official benchmark
In AIDC热点Ranked
Evidence budget1.5%
Upstream data timeTo be verified
Last successful sync11/02 20:05

What it measures and how

比较同一 V2 单代理任务的期末余额,保留多次运行方差;多人竞争 Arena、不同工具和推理配置分别处理。任务中的经营成果是评测成绩,API 价格不计能力分。

How to use this evidence

正式计分(方法 v16 起),计入“工具与办公”预算;成绩由 Andon Labs 发布、Epoch AI 汇编。

Benchmark results

按固定规则,每个公开模型采用一套代表配置。匿名测试型号不展示,保留原榜名次,每项最多 30 个。

Original board rankOriginal board modelRaw resultRepresentative config
1gemini-4-carbon_unknownGoogle16,484.2来源默认配置
2gpt-6-astra_unknownOpenAI15,514.7来源默认配置
3gpt-6-sol_unknownOpenAI14,427.8来源默认配置
4gemini-4-argon_unknownGoogle13,718.2来源默认配置
5claude-opus-5_unknownAnthropic11,181.9来源默认配置
6claude-sonnet-5-5_unknownAnthropic11,165.3来源默认配置
7claude-opus-4-7_unknownAnthropic10,936.8来源默认配置
8grok-4.7_unknownxAI10,536.8来源默认配置
9gpt-5.6-sol_unknownOpenAI9,619.4来源默认配置
10muse-wonder-1.0_unknownMeta9,432.2来源默认配置
11claude-opus-5-5_unknownAnthropic9,235.2来源默认配置
12gpt-6.1-terra_unknownOpenAI9,107.5来源默认配置
13grok-4.6_unknownxAI9,047来源默认配置
14glm-5.2_unknownZ.ai8,313.8来源默认配置
15glm-5.3_unknownZ.ai8,163.6来源默认配置
16claude-opus-4-6_unknownAnthropic8,017.6来源默认配置
17gpt-5.5_unknownOpenAI7,523.8来源默认配置
18gpt-5.6-terra_unknownOpenAI7,343.2来源默认配置
19claude-sonnet-4-6_unknownAnthropic7,204.1来源默认配置
20muse-spark-1.1Meta6,520.5来源默认配置
21claude-sonnet-5_unknownAnthropic6,377.7来源默认配置
22kimi-k2.6Moonshot AI6,204.6来源默认配置
23gpt-5.4-2026-03-05_unknownOpenAI6,144.2来源默认配置
24gpt-5.3-codexOpenAI5,940.1来源默认配置
27glm-5.1Z.ai5,634.4来源默认配置
28gemini-3-pro-previewGoogle5,478.2来源默认配置
29claude-fable-5-1_unknownAnthropic5,421.6来源默认配置
30gemini-3.5-flash_unknownGoogle5,396.4来源默认配置
31kimi-k3_unknownMoonshot AI5,165来源默认配置
32qwen3.6-plusAlibaba5,114.9来源默认配置
Benchmark limits and data attribution

盈利也可能来自利用模拟器,不能直接等同可信经营;成绩为发布方自报,没有误差范围。

Data license:CC BY 4.0 · Epoch AI 汇编,原始成绩由 Andon Labs 发布

成绩由 Andon Labs 发布,原始分数与 AIDC热点 共识分使用不同尺度,不能直接相加。