跳到正文
原文
arXiv 机器学习· Jingzhou Liu·· 2 小时前AI 评分26

神经网络损失景观临界轨道的通用拓扑对称性指标

A General Topological Symmetry Index for Critical Orbits In Neural Network Loss Landscapes

AI 导读

研究提出一种基于等变度理论的通用拓扑对称性指标,用于系统解析神经网络损失景观中临界轨道的对称性结构。该框架适用于任意网络架构,包含处理退化临界轨道的方法,能够检测临界点的各向同性并量化其净拓扑贡献。论文还结合 softplus MLP、Transformer 以及等变神经网络等多个具体实例展示了指标的实际计算过程。

来源:arXiv 机器学习 · arxiv.org