跳到正文
原文
arXiv 机器学习· Tiexin Ding·· 1 天前AI 评分35

基于行列尺度场的 Transformer 权重介观视角研究

A Mesoscopic View of Transformer Weights Through Row and Column Scale Fields

AI 导读

该研究提出行列尺度场(row and column scale fields),通过跨通道的 log-RMS 轮廓在介观层面精确分解与表征 Transformer 权重矩阵。

来源:arXiv 机器学习 · arxiv.org