arXiv 自然语言处理· Yiwen Yang, Guanming Liu·· 8 時間前AI スコア34
ProcessPrefBench：评估自然人机交互中个体过程偏好的跨任务迁移
ProcessPrefBench: Evaluating Cross-Task Transfer of Individual Process Preferences from Naturalistic Human-AI Interaction
未翻訳のため中国語で表示しています。
AI ガイド
评测基准 ProcessPrefBench 基于两名知识工作者 3 个月的自然对话构建 66 个案例，用于评估模型跨任务迁移用户个体过程偏好的能力。在 3 个模型的测试中，全历史与祈使式提炼偏好提示分别将偏好实现度在 0-2 分制下提高 0.204 和 0.244 分，但提炼偏好未体现出稳定优势。
出典：arXiv 自然语言处理 · arxiv.org