szhAC

摘要： aliases: tags: date created: 星期三, 十一月 26日 2025, 9:13:06 上午 date modified: 星期四, 十一月 27日 2025, 4:26:07 下午 VScode 下载 下载网站：Visual Studio Code VScode 插件推荐 阅读全文

摘要： aliases: tags: date created: 星期三, 十一月 26日 2025, 9:13:06 上午 date modified: 星期四, 十一月 27日 2025, 4:26:07 下午 VScode 下载 下载网站：Visual Studio Code VScode 插件推荐 阅读全文

摘要： 前提准备 Docker安装 VScode安装 Visual Studio Code插件 Dev Containers 配置 Docker 自定义容器构建 容器配置 文件目录： . ├── .devcontainer/ <-- 新建这个文件夹 │ └── devcontainer.json <-- 新 阅读全文

摘要： 前提准备 Docker安装 VScode安装 Visual Studio Code插件 Dev Containers 配置 Docker 预定义容器构建 创建容器步骤 点击 VSCode 左下角「打开远程窗口」 点击「打开容器配置文件」 点击「在工作区级别添加配置文件」 选择 来自预定义的容器配置定 阅读全文

摘要： 1 Obsidian下载 下载网站：Obsidian 官方文档：Obsidian 中文帮助 2 主题 推荐使用 Typora-Vue 3 插件 Another Quick Switcher 作用： 自定义搜索 浮动搜索 在对话框中显示反向链接 在不离开对话框的情况下导航到出站链接/反向链接 设置： 阅读全文

摘要： 1 环境准备 1.1 开启Hyper-V Hyper-V功能仅在Windows专业版、企业版和教育版中可用，家庭版不支持Hyper-V功能。 为了解决这一问题，我们需要通过自行创建cmd指令执行。 操作步骤： 创建cmd文件 首先需要创建一个cmd文件，可以命名如下：“Hyper-V.cmd”，创建 阅读全文

摘要： 📘今日学习总结 1 引言：Transformer中的Attention计算与GPU内存瓶颈 Transformer的Attention机制允许模型在处理序列数据时，为不同的位置赋予不同的权重，从而更好地捕捉序列内部的依赖关系。 让我们简单回顾一下Transformer中Attention的计算过程 阅读全文

摘要： 📘今日学习总结 一、常见评测指标 1. 分类任务 精确率：预测为正例中真正为正的比例 召回率：真正为正中被正确预测的比例 F1分数：精确率与召回率的调和平均数 2. 语言建模任务 困惑度：衡量模型对文本的建模能力，越低越好 公式： \(PPL(u) = \exp\left(-\frac{1}{T} 阅读全文

摘要： 📘今日学习总结 RLHF PPO PPO整体框架 输入问题 \(q\) ,经过策略模型更新，生成问题回答 \(o\) ,然后输入到三个模型 策略模型（Policy Model）：负责生成决策 奖励模型（Reward Model）：负责对生成决策的优劣程度进行打分 价值模型（Value Model） 阅读全文

摘要： 📘今日学习总结 KV Cache 作用 在 Transformer 模型中，KV Cache（Key-Value Cache，键值缓存） 指的是 自回归推理过程中缓存的 Key 和 Value，以避免重复计算。 它主要用于 自注意力机制（Self-Attention），在 解码（Decoder） 阅读全文