论文
Sonar-MoE: In-Backward Expert Updates for Memory-Efficient Mixture-of-Experts Training
提出Sonar-MoE训练法,在反向传播中动态更新专家参数,显著降低MoE模型训练显存占用,支持更大规模专家扩展
首次收录 2026-11-03热度 1.0
moetraining-optimizationmemory-efficiency
暂未评估,等待下一轮评分。
事件时间线
暂无事件。
关联信号
想把「Sonar-MoE: In-Backward Expert Updates for Memory-Efficient Mixture-of-Experts Training」相关的机会落到自己的业务上?
想把 AI 机会落到自己的业务上?
灯塔背后的优秘智能团队提供:AI 落地咨询 · GEO 优化(让 AI 搜索推荐你的品牌) · 定制开发。留下需求,1 个工作日内回复。