跳到正文
热点事件持续更新

研究团队提出面向显存受限节点的LRMoE训练系统

1 篇报道1 个报道来源9 小时前更新

先了解这件事

AI 综述

2026年10月30日,研究团队在arXiv发布论文,提出面向显存受限节点的内存感知MoE训练系统LRMoE。该系统旨在解决稀疏MoE模型中因路由不均导致的计算与通信瓶颈。LRMoE主要通过在反向传播过程中重校准负载并筛选token-expert对,同时结合容量感知路由与物理压缩技术,有效降低了模型训练过程中的通信及显存开销。

AI 根据报道生成 · 6 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月30日
  1. arXiv 人工智能
    LRMoE:面向显存受限节点高效 MoE 训练的需求侧负载重校准系统

    研究团队提出面向显存受限节点的内存感知 MoE 训练系统 LRMoE,以解决稀疏 MoE 路由不均导致的计算与通信瓶颈。该系统通过在反向传播中重校准负载并筛选 token-expert 对,结合容量感知路由与物理压缩降低通信及显存开销。

本事件热度走势

当前热度 8·可比范围峰值 9(10月30日 15:00)·近 24 小时可比范围变化 –

02.557.51010月30日15:0010月30日17:0010月30日18:0010月30日20:00

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。