跳到正文
原文
arXiv 自然语言处理· Yifan Zhang, Jichen Feng, Shihan Qin·· 4 小时前AI 评分37

Recurrent Looped Transformer 架构

Recurrent Looped Transformer

AI 导读

研究人员提出 Recurrent Looped Transformer(RLT),将层结构拆分为并行因果编码器与循环解码器,使计算路径随序列长度扩展并保持固定单 token 成本。

来源:arXiv 自然语言处理 · arxiv.org