AI内存压缩技术TurboQuant及存疑
一、 如何看待谷歌的 TurboQuant?
- 解决显存“贫血”问题:大模型极其吃内存。TurboQuant 允许模型在不损失太多“智商”的前提下,把原本庞大的数据体积压缩。这意味着未来你可能不需要昂贵的 A100 显卡,在普通端侧设备上就能运行更强大的本地 AI。
- 加速 AI 平民化:它降低了硬件门槛,这对于谷歌生态(安卓、Chrome)至关重要。这不仅是学术研究,更是谷歌为了在 端侧 AI(On-device AI) 领域与苹果(Apple Intelligence)竞争而祭出的利器。
- 算法与硬件的深度耦合:TurboQuant 优化了矩阵乘法的底层实现,显示出谷歌在“软件定制硬件”方面的深厚功底,这属于 AI 基础设施层的顶尖创新。
二、 这类创新似乎没出现?
- 1. “底层突破” vs “应用进化”
- 谷歌更偏向原始创新(Blue-sky Research)。谷歌是 Transformer 架构、TensorFlow、TPU 的发明者,它更习惯于从数学公式和硬件底层去改写规则。
- 中国巨头更擅长工程化落地与应用创新。在模型微调、高并发架构、短视频推荐算法、电商大模型应用等方面,字节和阿里其实是世界级的。中国公司的逻辑往往是:如何用已有的技术,在 14 亿人的市场里解决最复杂的商业变现问题。
- 2. 算力成本与禁令的制约
- 受限于高端芯片(如 H100)的获取难度,中国公司的创新目前被迫集中在“如何用受限的算力跑出最好的效果”。比如阿里巴巴的 Qwen(通义千问) 系列在多个开源榜单排名极高,这本身就是一种在算法效率上的极致创新。
- 3. 研发土壤的区别
- 长期主义 vs 季度财报:谷歌(及 Meta、OpenAI)敢于在看不见收益的项目上砸十年钱。而中国互联网公司过去十年处于激烈的存量竞争中,研发投入更倾向于“立竿见影”的项目。如果一个技术不能在一年内为抖音增加留存或为淘宝增加 GMV,其优先级往往会排在后面。
- 4. 创新正在发生,只是“静悄悄”
- 字节跳动的 Monolith 架构在处理千亿级稀疏参数特征上是业界领先的;
- 阿里巴巴的 M6 和 Qwen 系列在多模态理解上也非常出色;
- 腾讯在混元大模型的中文理解和广告精准投放上也有独到之处。
三、 TurboQuant技术是否抄袭RaBitQ存疑:
然而,就在3月27日,这场“技术革命”的剧情突然反转。苏黎世联邦理工学院的博士后、RaBitQ系列论文的第一作者高健扬,公开发布了一封长文,指控谷歌的TurboQuant论文存在严重问题,甚至可以说是“系统性造假”。他直接点名谷歌团队在知情的情况下,拒绝修正错误,并放任论文通过ICLR 2026会议审核,最终借助谷歌官方渠道大肆宣传。
事件核心:谷歌的“TurboQuant”到底是什么?
简单来说,TurboQuant是一种向量量化技术,核心是在压缩前对数据施加“随机旋转”,以提升压缩效率。而高健扬团队在2024年发表的RaBitQ技术,正是这一方向的先行者,其核心创新也是“随机旋转”,并且从数学上证明了其压缩误差达到了理论极限。
高健扬指控谷歌三大“罪状”
高健扬的澄清信直指TurboQuant论文的三大核心问题,每一条都相当致命:
指控一:系统性回避与RaBitQ方法的相似性
TurboQuant团队在论文中,对RaBitQ的描述要么不完整,要么干脆忽略。然而,早在2025年1月(TurboQuant论文发布前),TurboQuant的第二作者就曾主动联系高健扬,请求帮助调试他们基于RaBitQ代码实现的Python版本。这说明对方对RaBitQ的技术细节了如指掌,但在论文中却刻意回避这一直接联系。即便ICLR审稿人明确要求补充讨论,他们最终也未做修正。
指控二:错误描述RaBitQ的理论结果
TurboQuant论文在没有任何证据的情况下,将RaBitQ的理论保证定性为“次优”(suboptimal),并暗示其“分析粗糙”。但事实上,高健扬团队已在后续论文中严格证明RaBitQ的误差界达到了理论计算机顶级会议FOCS 2017论文给出的渐近最优误差界。更离谱的是,高健扬团队曾在2025年5月通过邮件详细纠正了对方的错误理解,对方明确表示已知情,但在后续的论文版本中依然保留了这一错误定性。
指控三:刻意创造不公平的实验环境
这是最离谱的一点。TurboQuant论文在对比性能时,报告RaBitQ的速度比TurboQuant慢了好几个数量级。但真相是:
-
实现方式不同:他们测试的是自己用Python写的劣化版RaBitQ,而非高健扬团队开源的、更高效的C++版本。
- 硬件环境不同:测试RaBitQ时,他们关闭多线程,只用单核CPU;而测试TurboQuant时,则使用了顶级的NVIDIA A100 GPU。
这种“不公平对比”在论文中完全没有披露,得出的结论显然是为了凸显自己算法的优越性。
目前,高健扬已向ICLR会议官方提交正式投诉,并计划发布详细的技术报告。这件事的核心已经不是简单的学术争论,而是涉及到一篇被顶级会议接收、并被科技巨头以千万级曝光量推向市场的“突破性技术”,其理论依据、实验数据和学术诚信都遭到了严重质疑。
对于我们硬件玩家来说,这件事也提供了一个观察角度:AI技术的“内存墙”问题固然需要解决,但任何宣称“颠覆性”的技术突破,尤其是能直接影响存储行业股价的“大新闻”,我们或许可以保持一份审慎。毕竟,真相和数据的严谨性,最终会决定一项技术是成为真正的革命,还是仅仅是一场精心策划的闹剧。
浙公网安备 33010602011771号