T-RoPE:面向序列推荐的时间感知旋转位置编码
随着大语言模型架构在序列推荐中的广泛应用,原本用于文本处理的旋转位置编码(RoPE)也被引入。然而,NLP 中的 RoPE 仅基于 token 索引编码相对次序,无法反映推荐交互中实际流逝的时间、多尺度行为周期及日历相位。为此,研究人员提出 T-RoPE(时间感知 RoPE),将传统基于索引的相对位置替换为显式的时间维度建模,以增强生成式推荐模型捕捉用户随时间变化兴趣演进的能力。
推荐理由针对推荐系统对时间动态的高敏感度,将大模型标准 RoPE 改造成时间感知版本,对生成式推荐架构有实用参考价值。
原标题:T-RoPE: Time-Aware Rotary Position Embedding for Sequential Recommendation
阅读 arXiv 人工智能 原文 ↗