我的随笔

多模态大模型应用中的Q-Former是什么？

Picassooo 2024-12-18 15:56 阅读:399 评论:0 推荐:0

转：FlashAttention

Picassooo 2024-12-13 15:14 阅读:25 评论:0 推荐:0

高精地图HD map, 轻高精地图LD map，导航地图SD map

Picassooo 2024-12-13 09:42 阅读:1852 评论:0 推荐:1

转：轨迹预测损失函数计算

Picassooo 2024-12-12 09:34 阅读:43 评论:0 推荐:0

详解PyTorch FSDP数据并行(Fully Sharded Data Parallel)

Picassooo 2024-12-08 11:51 阅读:151 评论:0 推荐:0

主节点，节点编号node_rank，全局进程编号rank，局部进程编号，全局总进程数world_size

Picassooo 2024-12-08 11:45 阅读:76 评论:0 推荐:0

gradient_accumulation_steps --梯度累加理解

Picassooo 2024-12-08 11:23 阅读:181 评论:0 推荐:0

大语言模型LLM相关资料

Picassooo 2024-12-07 11:38 阅读:48 评论:0 推荐:0

大语言模型LLM之MoE系列

Picassooo 2024-12-07 11:36 阅读:137 评论:0 推荐:0

大语言模型LLM之GPT系列

Picassooo 2024-12-07 11:33 阅读:58 评论:0 推荐:0