arXiv 自然语言处理· Lukas Edman, Alexander Fraser·· 7 小时前AI 评分32
Qwenfant:基于精简平行文本训练大型字符级 BabyLM
Qwenfant: Train Big Character-level BabyLMs on Concise Parallel Text
AI 导读
研究人员针对 2026 BabyLM Challenge 多语言赛道推出基于 Qwen3 的模型 Qwenfant,在提交时位列该赛道第 1 名。该方案利用大语言模型总结与翻译的合成数据提升质量,并结合更大的模型规模与字符级词表设计。这两项改进均需要采用 LoRA 风格微调以充分发挥其潜力。
来源:arXiv 自然语言处理 · arxiv.org