研究团队提出动态秩分配LoRA方法LIRA
Start here
2026年11月4日,研究人员在arXiv发表论文,提出了一种面向LoRA的动态损失导向秩分配方法LIRA。该方法利用二阶近似估计局部损失扰动为各层进行评分,以此提升在线秩重分配过程的可解释性。在运行机制上,LIRA通过周期性应用位移评估算法DELTA,在匹配设定预算的前提下生成离散有效秩,并兼容标准(A,B)适配器。在RoBERTa-base的GLUE基准评测中,LIRA的整体表现优于统一LoRA以及现有的自适应秩基线方法。
AI-generated from reports · Updated 9 hours ago
Report timeline
Follow the reports to see different sides of the story.
- arXiv 机器学习LIRA:面向 LoRA 的更具可解释性动态损失导向秩分配方法
研究人员提出动态秩 LoRA 方法 LIRA,通过二阶近似估计局部损失扰动为各层评分,提升在线秩重分配的可解释性。该方法周期性应用位移评估算法 DELTA,在匹配预算下生成离散有效秩并兼容标准 (A,B) 适配器。在 RoBERTa-base GLUE 评测中,LIRA 的表现优于统一 LoRA 及现有自适应秩基线。
Story heat trend
Current heat 8·Comparable peak 10(Nov 4 14:00)·Comparable change, last 24 hours–
Trends compare only the same parties observed continuously, so the scope can be narrower than current heat counts. Move the pointer or tap the chart to see hourly heat; use the left and right arrow keys on a keyboard.