arXiv cs.LG·19 天前★ 2

PRIME:面向 MoE 的频率感知统一剪枝与合并

原文标题:PRIME: Frequency-Aware Unified Pruning and Merging for MoE Compression

重要度 2/5 · AI 综合评估报道影响力与新鲜度,4–5 分为高价值资讯。

AI 智能摘要

论文提出 PRIME,一个 压缩的统一优化框架,将离散的剪枝-合并分配建模为频率加权目标下的全局整数线性规划,联合决策并考虑专家使用频率。在 Qwen3-30B-A3B 与 Qwen3.5-122B-A10B 上,PRIME 在知识、代码、数学与长任务中保持较高精度,并在 中量化了内存与吞吐收益。

阅读原文 +0
AI 处理过程展开/收起
原始标题:PRIME: Frequency-Aware Unified Pruning and Merging for MoE Compression
AI 中文标题:PRIME:面向 MoE 的频率感知统一剪枝与合并
来源:arXiv cs.LG · 发布于 19 天前
分类:大模型 · AI 重要度:★ 2(2)
标签:MoE / 模型压缩 / 剪枝 / 模型合并 / 推理加速
关键词:MoE 压缩 / 专家剪枝 / 模型合并 / 大模型推理加速 / Qwen3
AI 处理:2026/10/14 15:02:30 · 模型 deepseek-chat · 规则版本 2026-10-10.1
AI 生成以上内容由 AI 自动生成:中文标题、摘要、分类与重要度;同一事件的多家报道会自动归并展示。 内容仅供参考,可能存在偏差,请以原文为准, 不构成任何投资或专业建议。
版权归原作者与原发布平台所有;若涉及侵权或信息错误,请在举报与侵权投诉页反馈,我们会及时处理。
每天 09:30,3 条 AI 圈真正重要的变化,免费订阅 →
PRIME:面向 MoE 的频率感知统一剪枝与合并 - 智讯 AI News