Epoch AI 推出家具组装基准测试 FAB:评估多模态模型空间推理与找错能力
Epoch AI 开展了家具组装基准测试(FAB),旨在评估多模态大模型在现实物理装配过程中的视觉与空间推理能力。测试要求模型结合官方 PDF 安装说明书、图像放大工具及代码解释器,对比故意错误组装的宜家家具照片并定位错误。结果显示,前沿多模态模型在该基准上的准确率已达 80%,展现出较强的多步骤指令匹配与实际场景检错潜力,对家电、汽车检修等实际应用具有参考价值。
Epoch AI 开展了家具组装基准测试(FAB),旨在评估多模态大模型在现实物理装配过程中的视觉与空间推理能力。测试要求模型结合官方 PDF 安装说明书、图像放大工具及代码解释器,对比故意错误组装的宜家家具照片并定位错误。结果显示,前沿多模态模型在该基准上的准确率已达 80%,展现出较强的多步骤指令匹配与实际场景检错潜力,对家电、汽车检修等实际应用具有参考价值。
第48届世界技能大赛在上海举行。本届大赛64个项目中共有8个与AI直接相关,其中智慧安防技术、软件测试、数字交互媒体设计为本届新增赛项,新增AI赛项数量创历届之最。赛题深度融合AI实战场景,涵盖利用深度学习与大模型原理实现安防异常识别、调用多智能体协同进行软件测试、面向具身智能的自主移动机器人导航与抓取,以及工业4.0智能协同等,展现了AI技能在全球职业培训中的普及趋势。