跳到正文
热点事件持续更新

研究者提出CoDPO算法解决DPO约束漂移

1 篇报道1 个报道来源8 小时前更新

先了解这件事

AI 综述

针对直接偏好优化(DPO)中成对偏好与逐点评分冲突所导致的约束漂移问题,arXiv于2026年11月6日发布相关研究。研究团队提出了对齐前诊断指标 ρ*eq 与校正算法 CoDPO。在该方案中,CoDPO 会依据 ρ*eq 对存在冲突的样本进行自适应降权处理,并通过引入自适应间隔偏移,来消除模型训练过程中产生的残余漂移。

AI 根据报道生成 · 8 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月6日
  1. arXiv 机器学习
    评分与偏好冲突时:DPO 约束漂移的对齐前诊断与自适应校正

    针对 DPO 中成对偏好与逐点评分冲突导致的约束漂移问题,研究提出了对齐前诊断指标 $\rho^{*}_{\mathrm{eq}}$ 与校正算法 CoDPO。CoDPO 依据 $\rho^{*}_{\mathrm{eq}}$ 对冲突样本自适应降权,并引入自适应间隔偏移消除训练中的残余漂移。

本事件热度走势

当前热度 8·可比范围峰值 10(11月6日 14:00)·近 24 小时可比范围变化–

02.557.51011月6日14:0011月6日16:0011月6日18:0011月6日20:00

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。