AI 事件专题★ 3

SAGE 2 比特向量量化

SAGE:2 比特向量量化 LLM 逼近可用

10-14 12:00 首发·1 家媒体·1 篇报道·持续 1 天·大模型
相关方:NNvidia
事件综述

论文提出 SAGE 权重向量量化方法,用能量分层分组(ESG)保护敏感权重通道,用自适应比特拆分(ABS)在固定比特预算下平衡方向码本与半径精度。在 2 比特设置下达到 SOTA,Qwen3-30B-A3B 保留 平均基准分的 95.3%,配合定制 内核较 FP16 端到端加速最高 2.55 倍。

各方报道 1 篇

arXiv cs.AI·10-14 12:00★ 3
SAGE:2 比特向量量化 LLM 逼近可用

论文提出 SAGE 权重向量量化方法,用能量分层分组(ESG)保护敏感权重通道,用自适应比特拆分(ABS)在固定比特预算下平衡方向码本与半径精度。在 2 比特设置下达到 SOTA,Qwen3-30B-A3B 保留 平均基准分的 95.3%,配合定制 内核较 FP16 端到端加速最高 2.55 倍。

原文

关联

SAGE 2 比特向量量化 最新进展 - 事件时间线 - 智讯 AI News