# 【轻量化复刻大模型 / KIMI K3】Attention Residuals 完整梳理(2) 目录0x00 概要0x01 子知识点拆解0x02 子知识点深度分析2.0 共享抽象与设计动机2.1 打分核(scoring kernel)与伪查询2.1.1 原理(三视角)2.1.2 对比基线2.1. ...
算术运算符用来对数字做计算,就是加、减、乘、除、取余,和数学里一样。 动画视频在《0.1+0.2=0.30000000000000004?ArkTS算术运算符实战详解》。 下面用 10 和 3 各算一次。 let a: number = 10; let b: number = 3; console. ...
我的暴力有救了哈哈哈。 是什么 莫队是一种离线区间查询的算法,是前国家队队长莫涛提出并推广的。由离线+分块(排序)+暴力移动指针组成,简直就是优雅的暴力。 关于莫对的分类:目前有普通的只查询莫队、带修莫队(带修改的)、回滚莫队(用撤销操作来代替删除等修改)、以及树上莫队(树剖+其他的(带修\(\do ...
本文按“先说结论 → 普通 Agent 与防注入 Agent 对比 → 四层安全架构拆解 → 真实验证链路 → 2024–2026 论文演进 → 技术边界”的顺序,把端侧 AI 交互智能体(任务提取 + 个人数据问答)的防提示词注入架构彻底讲透,拒绝云里雾里的概念堆砌。 一、 先说结论 防提示词注入 ...
忙起来时,我们常把“休息一下”推迟到下一件事之后。Tick Rest 是一款免费开源的 Mac 休息提醒 App,通过菜单栏倒计时、小窗或全屏提醒,帮你记得远眺、喝水和起身活动。它内置护眼、50/10、番茄工作法等方案,支持自定义间隔与时长,还能设置工作时段、延后或暂停提醒,配合不同的工作节奏。无需... ...
AI 生成声明:本文内容由 AI 生成或经 AI 辅助完成,请注意甄别。 有同学在项目里写了这样一段 WebSocket 消息序列化代码,然后在评审时连续抛了几个好问题: message = json.dumps({ "type": event_type.value, "data": data }, ...
前面的shiro反序化https://www.cnblogs.com/nihao-xing/p/23433100 大致介绍了原理,我知道哪怕我写的原理再详细,其实很多人也会对着理论头大,其实我也很讨厌理论,可是我们是做研究的,这个问题是无法回避的。所以后面我会尽量多的收集些源码去进行复现和总结。但是 ...
为什么你很会用AI,但就是做不成FDE? 最近大家都在讨论FDE,但更多的是听到被培训割了韭菜。 私下也有太多人来问我,于是我决定干脆把这一年多给国企和上市公司AI落地和培训、交付过多个百万级别项目的FDE心得整理出来,分享给大家,希望帮真正有需要的同学避坑。 我相信,即便你不做FDE,这套方法 ...
共享 Vector 集群的内存每天涨约 10 个百分点、每周被重启一次。allocation tracing 一直把矛头指向上游 transform,真正持有内存的却是 datadog_metrics sink:它为每条累计值 series 保存的增量转换基线没有 TTL 也没有容量上限。本文记录从... ...
菜单加到十项后,代码里冒出一个不像函数的地址:它不执行,却替菜单记住“该调用谁”。函数指针如何把选择变成数据?宏、反斜杠、do-while(0)和X-Macro又为何一起登场?从回调到表驱动,一次拆开。 ...
WORKHUB · 开源项目 工具、资料、创作与生意,本来就不该散落在十几个标签页里。 独立开发者的日常,大概是这样的:写代码在 VS Code,记灵感在备忘录,收藏夹在浏览器,客户资料在表格,发票和回款又是一套 Excel。每个工具都不差,但它们彼此不认识。 WorkHub 想做的不是再加一个工具 ...
ROS2 保姆级课程(Python 入门版)· 课程大纲 课程名称:ROS2 保姆级课程(Python入门版) 定位:面向零基础小白的 ROS2 保姆级入门视频课 形态:按集规划(每集含目标、演示、坑点、预期输出、小作业) 范围:环境 → 通信 → 工具链 → 建模仿真 → 综合项目 技术栈:WSL ...
学了一些比较有意思的东西,记录一下。 关于 AI :本文使用蓝色大肥鱼进行查错和标准化,可能会有一点人机味道,保证人类贡献大于 AI。 鞅 设 \((\Omega,\mathcal F,\mathbb P)\) 是概率空间。 随机过程 \(\{M_n\}_{n\ge 0}\) 称为关于 \(\{\m ...
title: Transformer 架构详解 author: 凌杰 date: 2026-09-28 tags: [深度神经网络, Transformer, 注意力机制] categories: 基础理论学习 [!NOTE] 笔记说明 这篇笔记对应的是《[[关于 AI 的学习路线图]]》一文中所规 ...
本文通过真实复现两个经典 loss 变 NaN 场景,揭示其根源:过大学习率导致梯度溢出,或自定义损失中 log(0) 引发 inf 传导至 NaN。借助 PyTorch forward hook 逐层监控,可精准定位首现 inf 的层与步数,实现“烟感报警式”快速诊断。结合二分法调参与数值稳定写法... ...
这份复核记录从一个报告开始,到一张签字单结束。报告的建议是给 trade_flow 加 (status, created_at) 索引;我的处理是先退回补证据,再按结果集、计划、写入副作用三步验,过了才排窗口。 记录按“报告、验证、签字、归档”四段写。文中的表名、行数、延迟、索引大小都是示例环境,只 ...
规范清晰・减少冲突・协作高效 几年前我接手过一个六人小团队,代码写得不算差,但协作方式很 "野生":所有人挤在一个分支上开发,上线前一周全员解冲突,一解就是一个通宵。 更糟的是有一次线上出 bug,值班同学直接在 main 上改了几行,验证没问题就发了版 —— 两周后新版本上线,同一个 bug 原地 ...
第四篇:工程落地与评测——从原型到可运营的语义引擎 TL;DR 落地三件事:把冻结执行计划接入真实 WAF 链路、把规则开发流程工程化(CI + 差分测试 + 灰度)、把可观测性补齐(降级率、证据分布、证书抽样)。 评测方法论:以「判定一致性 + 证据完整度 + 时延分布」三轴评测,而非单一准确率; ...
简介 网络上关于DDD的文章很多,但我水平有限,其实很少看懂过。 借着新项目使用abp的春风,带着问题去学习/思考,效率永远是最快的。 对Navigation Properties的滥用 因为公司要求使用外键,所以代码中也自然而然的配置好了导航属性,这在我们日常开发中很爽,dbContext一拿,I ...
系列大纲 · 手搓 AI Agent(Node.js / TypeScript) 本系列从零手搓一个通用工具型 Agent:能对话、能调用工具、能规划任务、能多 Agent 协作,并最终接入 MCP 生态。技术栈锁定 Node.js 22 + TypeScript,模型接入层用一套 OpenAI 兼 ...