10 2025 档案
摘要:
使用Ollama部署Qwen3模型进行推理场景的性能实测,比较3080 20G和3090 24G的差异到底多大?
RTX 3080 20G显卡是基于3080 10G魔改的卡,目前市面比较多得被用于小规模参数的大语言模型推理场景,被认为是性价比比3090还高的推理显卡。
对比显卡参数,3080 20G在核心数量、显存、带宽、算力方面基本都是3090 24G的83%左右。
阅读全文
使用Ollama部署Qwen3模型进行推理场景的性能实测,比较3080 20G和3090 24G的差异到底多大?
RTX 3080 20G显卡是基于3080 10G魔改的卡,目前市面比较多得被用于小规模参数的大语言模型推理场景,被认为是性价比比3090还高的推理显卡。
对比显卡参数,3080 20G在核心数量、显存、带宽、算力方面基本都是3090 24G的83%左右。
阅读全文
摘要:
使用Ollama的快速模型部署,来实测英伟达的RTX 3090和RTX 4090这两张显卡,在大语言模型推理场景中的性能差异。
选择 Qwen3的模型进行测试,考虑到显存都是24GB,分别选择一个FP16精度和一个Q4_K_M量化后的大模型进行测试。
阅读全文
使用Ollama的快速模型部署,来实测英伟达的RTX 3090和RTX 4090这两张显卡,在大语言模型推理场景中的性能差异。
选择 Qwen3的模型进行测试,考虑到显存都是24GB,分别选择一个FP16精度和一个Q4_K_M量化后的大模型进行测试。
阅读全文
摘要:
选择了英伟达的RTX 3090和RTX 4090两张显卡,在实际的深度学习场景进行性能实测,基于ResNet-50模型训练比较下被称为「上一代卡皇」的 3090 和「当前消费级主力」的 4090 的实际性能到底差多少?
阅读全文
选择了英伟达的RTX 3090和RTX 4090两张显卡,在实际的深度学习场景进行性能实测,基于ResNet-50模型训练比较下被称为「上一代卡皇」的 3090 和「当前消费级主力」的 4090 的实际性能到底差多少?
阅读全文
摘要:
AI时代大模型的应用已经渗透到日常的角角落落,同时算力变成了普遍的需求,在购买显卡或者租用GPU云算力的时候,如何选择合适的显卡呢,需要关注哪些参数?
本文以最常见的英伟达显卡为例,来说说显卡的各种参数是如何影响算力性能的。
阅读全文
AI时代大模型的应用已经渗透到日常的角角落落,同时算力变成了普遍的需求,在购买显卡或者租用GPU云算力的时候,如何选择合适的显卡呢,需要关注哪些参数?
本文以最常见的英伟达显卡为例,来说说显卡的各种参数是如何影响算力性能的。
阅读全文
浙公网安备 33010602011771号