arXiv 机器学习· John J. Vastola, Ann Huang, Satpreet H. Singh, Samuel J. Gershman, Kanaka Rajan·· 5 小时前AI 评分35
课程学习的有效性取决于奖励稀疏度与竞争性最优
Effectiveness of Curriculum Learning Depends on Reward Sparsity and Competing Optima
AI 导读
研究人员通过构建基于 REINFORCE 的策略学习极简模型，揭示了课程学习的有效性关键取决于奖励稀疏度与竞争性最优。在密集奖励下课程学习仅带来微弱收益，而在稀疏奖励且存在减少努力与累积高奖励冲突时，课程则是成功学习的必要条件。有效的课程主要通过降低奖励稀疏度来加速学习，并重塑奖励曲面以引导 AI 智能体避开不良局部最优。
来源：arXiv 机器学习 · arxiv.org