2025年3月9日

【GPU】什么是 NVLink?

摘要: 目录 前言 NVLink说明 简介 技术特点 应用领域 如何使用nvlink 一 环境准备 二 NVLink使用 实际应用 注意事项 常用状态查询 前言 建议阅读官网说明或官方博客文章: NVLink & NVSwitch: https://www.nvidia.com/en-us/data-cen 阅读全文

posted @ 2025-03-09 16:25 bdy 阅读(135) 评论(0) 推荐(0)

【GPU】什么是NCCL和Simple, LL, LL128通信协议

摘要: 什么是NCCL 简介 NCCL (NVIDIA Collective Communications Library,NVIDIA 集群通信) 是 NVIDIA 专为 GPU设计用于 GPU 之间高性能通信的库。 深度学习模型规模巨大,需要将模型或数据分割到多个 GPU 上进行并行训练,NCCL 就是 阅读全文

posted @ 2025-03-09 15:48 bdy 阅读(133) 评论(0) 推荐(0)

【CUDA】什么是CUDA?什么是CUDA编程?

摘要: 目录 什么是CUDA? 什么是CUDA编程? CUDA特性 1. 统一的编程模型 2. 统一的硬件架构 3. 统一的内存访问模型 4. 统一的开发工具 CUDA 编程的核心概念 CUDA 编程的基本步骤 CUDA 编程的优势 示例代码:向量加法 总结 什么是CUDA? CUDA(Compute Un 阅读全文

posted @ 2025-03-09 05:21 bdy 阅读(19) 评论(0) 推荐(0)

导航