AITNT · AI头条(网页)·· 9 小时前AI 评分63
至知创新研究院开源 320B 稀疏 MoE 大模型 IQuest-Q1
一出手就表现惊艳!国产开源大模型又杀出一匹黑马
AI 导读
至知创新研究院开源了稀疏 MoE 架构大模型 IQuest-Q1,总参数约 320B、激活参数约 15B,主打代码生成、软件工程与长程复杂任务执行。该模型在预训练、中期训练和后训练三阶段中采用了多教师同策略蒸馏(MOPD)方法,并在 NL2Repo、Terminal-Bench 2.1 与 DeepSWE v1.1 等基准上展示了较为均衡的能力。
来源:AITNT · AI头条(网页) · aitntnews.com