arXiv 人工智能· Shidong Cao, Jing Ma, Wenhao Chai, Yuchen Tian, Lun Du, Da Zheng·· 8 小时前AI 评分43
DConstrain:面向扩散语言模型约束解码的上下文参数化转换编译
DConstrain: Compiling Context-Parameterized Transitions for Diffusion Language Model Constrained Decoding
AI 导读
研究团队提出 DConstrain,通过编译上下文参数化转换程序,实现扩散语言模型在任意属性顺序下的精确约束解码。在 BFCL 基准测试中,DConstrain 实现 100% 的 schema 编译与模式有效性,将端到端解码延迟降低 6.65-46.26 倍。该方法还将 DiffusionGemma 的准确率从固定顺序下的 37.27% 提升至 81.56%。
来源:arXiv 人工智能 · arxiv.org