跳到正文
原文
arXiv 人工智能· Yizhou Han, Di Wu, Dhananjay Saikumar, Blesson Varghese·· 7 小时前AI 评分45

AgBench:面向个人 AI 设备的智能体 AI 基准测试套件

AgBench: Agentic AI Benchmarks for Personal AI Devices

AI 导读

AgBench 是一套用于评估个人 AI 设备上智能体性能的开源基准测试套件,支持本地、混合与云端执行模式。基于超 1.6207 亿数据点的评估显示,纯本地执行能消除云端 API 成本与敏感数据暴露,但任务成功率和耗时劣于纯云端执行。混合执行可提升成功率,架构部署需结合工作负载与设备能力在性能、成本及隐私间权衡。

来源:arXiv 人工智能 · arxiv.org