跳到正文
热点事件持续更新

研究提出利用辅助奖励改进小语言模型自我提升能力

1 篇报道1 个报道来源5 小时前更新

先了解这件事

AI 综述

2026年11月2日,arXiv人工智能领域发表研究《利用辅助奖励实现自我提升:从已验证轨迹中学习与评估迁移》。该研究指出,辅助轨迹偏好能够改进小语言模型的自我提升与迁移能力,旨在解决答案级奖励无法区分相同正确推理轨迹的局限。实验结果显示,在30道AIME问题上适配Qwen3-1.7B模型时,采用UID-Conj.辅助奖励使在线宏平均表现较未修改的TTRL提高了2.08个百分点;在离线加权SFT实验中,UID-Conj.相较于均匀加权提升了1.93个百分点,展现出挖掘正确轨迹潜在训练价值的效果。

AI 根据报道生成 · 5 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月2日
  1. arXiv 人工智能
    利用辅助奖励实现自我提升:从已验证轨迹中学习与评估迁移

    研究表明辅助轨迹偏好可改进小语言模型的自我提升与迁移能力,解决答案级奖励无法区分相同正确推理轨迹的问题。在 30 道 AIME 问题上适配 Qwen3-1.7B 时,UID-Conj. 奖励使在线宏平均表现较未修改的 TTRL 提高 2.08 个百分点。离线加权 SFT 实验中 UID-Conj. 较均匀加权提升 1.93 个百分点,有效发掘了正确轨迹中的潜在训练价值。

本事件热度走势

当前热度 9·可比范围峰值 10(11月2日 14:00)·近 24 小时可比范围变化–

02.557.51011月2日14:0011月2日15:0011月2日17:0011月2日18:00

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。