arXiv 自然语言处理· Zongwan Cao, Ziyuan Yang, Shangbin Feng, Michael Duan, Skyler Hallinan, Bingbing Wen, Lucy Lu Wang, Yulia Tsvetkov·· 1 天前AI 评分36
多 LLM 协作中的策略性模型选择研究
You're Hired: Strategic Model Selection for LLM Collaboration
AI 导读
一项研究针对多 LLM 协作系统提出并评估了 9 种模型选择算法,以解决依赖人工构建模型池的瓶颈。在包含 10 和 32 个候选模型及 4 种协作算法的测试中,有效策略在数学、代码、QA 与推理任务上比仅选单模最优等启发式方法性能最高提升 36.1%。基于能力感知的算法表现最佳,且能稳健过滤不安全模型并泛化至分布外任务。
来源:arXiv 自然语言处理 · arxiv.org