会员
周边
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
sc00001
博客园
首页
新随笔
联系
订阅
管理
2026年10月6日
开源大模型私有化部署要几张卡?
摘要: 开源大模型私有化部署要几张卡?195 个模型的显存需求一览(2026 年 9 月)数据截至 2026 年 9 月 30 日。显存数字取自 vLLM 官方 recipes(recipes.vllm.ai)标注的最低显存, 卡数按「显存装得下」推算。完整数据和测算工具在 https://modelsag
阅读全文
posted @ 2026-10-06 11:20 sc00001
阅读(18)
评论(0)
推荐(0)
公告