摘要: 导读 阿里云 Tair KVCache 团队联合 SGLang HiCache Team 、蚂蚁 AI Infra-推理服务团队、阿里云服务器震旦异构计算团队,共同推出面向 Sparse Attention 的分层稀疏化框架,本文详细介绍该框架的架构设计与实现细节。 在前文《智能体式推理对 KVCa 阅读全文
posted @ 2026-01-23 10:48 数据库知识分享者小北 阅读(215) 评论(0) 推荐(0)