跳到正文
原文
Google Research·· 2026-03-25精选AI 评分62

Google 发布 TurboQuant 等向量量化方法,将 KV cache 压至 3 bit

TurboQuant: Redefining AI efficiency with extreme compression

AI 导读

Google Research 提出 TurboQuant 压缩算法,并配套 QJL 与 PolarQuant 两种方法,用于解决向量量化中的内存开销问题,相关论文将分别在 ICLR 2026 和 AISTATS 2026 发表。

推荐理由

Google 提出 TurboQuant 等三种向量量化方法,可在不损失精度的前提下把 KV cache 压到 3 bit,读者可据此了解长上下文推理的内存优化路径。

来源:Google Research · research.google