arXiv 机器学习· Zhaoyi Zhou, Frank Wu, Andrea Zanette·· 8 小时前AI 评分43
随机重新掩码实现掩码扩散模型推理扩展
Random Remasking Scales Masked Diffusion Inference
AI 导读
研究人员提出随机重新掩码去噪(R^2D)推理方法与轨迹校正训练(TCT),解决掩码扩散模型生成过程中错误不可逆的问题。该方法具备免微调与近对数线性测试时扩展特性,在困难数独与 3-SAT 逻辑任务上分别取得超 97% 和超 99% 的准确率。在实际语言任务中,其在 HumanEval+ 上的表现超越了 LLaDA2.1-mini 官方 Q-mode 准确率。
来源:arXiv 机器学习 · arxiv.org