跳到正文
热点事件持续更新

研究人员提出UNM-DPO偏好优化方法

1 篇报道1 个报道来源4 小时前更新

先了解这件事

AI 综述

2026年10月1日,相关研究提出用于改进直接偏好优化(DPO)的UNM-DPO算法,该方法结合了偏好强度边界与可学习的提示词尺度。在此基础上,研究人员进一步衍生出引入长度归一化的ULNM-DPO-WR算法。评测结果显示,基于该算法训练的Llama-3.1-8B-Instruct模型在HelpSteer评测中对阵DPO取得了68.00%和65.31%的平局调整胜率。

AI 根据报道生成 · 4 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月1日
  1. arXiv 机器学习
    用于直接偏好优化(DPO)的不确定性归一化边界

    研究人员提出 UNM-DPO 算法,结合偏好强度边界与可学习的提示词尺度来改进直接偏好优化(DPO)。在此基础上衍生的 ULNM-DPO-WR 进一步引入长度归一化,使 Llama-3.1-8B-Instruct 在 HelpSteer 评测中对阵 DPO 取得 68.00% 和 65.31% 的平局调整胜率。

本事件热度走势

当前热度 9·可比范围峰值 10(10月1日 13:00)·近 24 小时可比范围变化 –

02.557.51010月1日13:0010月1日14:0010月1日15:0010月1日16:00

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。