Kafka 为什么快?sendfile 到底省掉了哪几次拷贝

博主头像 大家多少都和「把文件发出去」这件事打过交道: 用过 Kafka 的都知道它快,一台 Broker 同时喂好几个消费组,CPU 还不怎么高; Nginx 配置里几乎都有一行 sendfile on;,很多人照抄,却不知道它开了什么; Java 的 FileChannel 有个 transferTo 方 ...

机器学习与深度学习算法参数详解(上)

博主头像 机器学习与深度学习算法参数详解与调参实战手册 目录 第一章 阅读指南 第二章 算法全景与分类体系 第三章 数据与特征工程的参数 第四章 传统机器学习算法参数详解 第五章 深度学习通用训练参数 第六章 典型网络结构的结构参数 第七章 大模型微调参数 第八章 训练成功的判据体系 第九章 失败与病态训练图 ...

手把手教你:开了混合精度就 NaN,GradScaler 到底在做什么|AI工程师踩坑实录·第11篇

博主头像 本文深入解析混合精度训练中GradScaler的必要性:fp16数值范围仅6.1e-5~65504,远小于fp32,导致梯度易发生上溢(变inf)或下溢(变0),前者显性报错,后者静默失效,模型“装死”却无预警。GradScaler作为梯度电梯,通过放大梯度防下溢、检测异常降scale、还原梯度保学... ...

华三双核心交换机IRF堆叠

博主头像 之前笼统的学习过各家设备的堆叠配置,但是一直没有实际上手过,正好最近有个客户买了两台华三S10506X-G框式核心交换机做irf堆叠,于是想着记录一下。 这是官方文档对irf的优点介绍: · 统一管理:IRF形成之后,用户通过IRF中的任意端口都可以登录IRF系统,对所有成员设备进行统一管理。同时, ...

一张图片搞定多尺寸:CDN 图片处理

博主头像 做前端或者后端的人,大概都经历过这种局面:用户头像要 48px、列表缩略图要 200px、详情页要 800px,移动端还要再来一套 WebP。 最原始的做法很直接:上传的时候一次性生成好四五个版本,全部丢进对象存储,数据库多存几个地址分别对应。 图片量少还好,一旦多起来,存储成本悄悄往上走,后续迁移 ...

Day 24:权限的三轴:动作、行与列

昨天结尾说今天换一条轴。保护等级管的是一次调用的形式,它从头到尾没有问过这个人可以看到哪些数据。 权限是 ERP 躲不掉的题目,而它从来不是一个问题,是三个:采购员能不能删采购单、能删哪几张、以及那张单上的成本列他看不看得到、改不改得动。三个问题的答案来源不同,运行的位置也不同。 本篇说明: X-A ...

C# winform卡死问题分析1——线程池子线程创建句柄

博主头像 最近遇到一个winform上位机程序卡死的问题,排查了半天发现挺有趣,我们一起来分析排查下。 目录前排提示现象简化Demo代码排查观察下主线程卡在哪里查看控件所属线程框架逻辑为什么卡死排查代码卡死偶发能够恢复 前排提示 生产代码由于各种历史问题出现奇奇怪怪的代码很正常,我们不讨论这段代码该不该这么写 ...

Harness:把裸模型变成能用的 Agent

博主头像 02 · Harness:把裸模型变成能用的 Agent 读完你会知道: 为什么「会聊天」和「能干活」是两件事,Harness 具体补的是哪一段; Harness 的四组配置、三个插槽分别控制什么,接口语义是什么; 一次请求的真实顺序:历史、上下文提供者、模型、工具循环各在什么位置; 工具循环的工程 ...

128GB 让 “本地跑大模型” 成为日用品,但分水岭不在硬件

博主头像 年底想在家或办公室跑大模型的人,都会撞上同一堵墙:显存。 一张 24GB 显存的显卡,装不下一个 70B 参数的模型 —— 因为除了模型本身,长上下文的 “记忆缓存”(KV cache)还要额外吃内存。想在本地跑上百亿参数、又带长上下文的模型,桌面设备里真正能开口径的,是同一类形态:128GB 统一 ...

Redis 核心机制 | Lazy Free:异步删除大 Key ,架构师视角的机制、代价与决策框架

博主头像 Lazy Free 的核心在于将键的摘除(主线程,O(1))与内存释放(BIO线程,O(N))分离,实现删除操作的异步化。通过 UNLINK 命令可显著降低主线程延迟(如百万级 Hash 删除从525ms降至37μs),但内存归还存在延迟(约0.5秒)。关键机制是:仅当释放成本超过阈值时才交由后台线... ...

给 PACS 数据加一道"匿名闸门":自研 DICOM 脱敏服务器的实践

博主头像 本文介绍一套自研DICOM脱敏服务器实践,通过作为PACS代理网关,实现科研数据“可用不可见”。该系统在不改造原有PACS的前提下,统一承接查询与下载请求,按策略对患者姓名、ID、机构等敏感信息进行脱敏处理,保留科研所需模态、部位、检查描述等元数据。支持白名单、时间窗、字段级配置,确保数据出域可控、... ...

在家工作,也别把一天都交给屏幕:用 Tick Rest 留住休息时间

博主头像 在家办公省去了通勤,也可能少了许多自然起身的机会。Tick Rest 是一款免费开源的 Mac 休息提醒 App,通过可调整的休息方案、小窗或全屏提示,帮你在连续工作中记得接水、远眺和走动。它支持自定义间隔、时长与工作时段,临时有事也能延后或暂停提醒。无需注册账号,没有广告,设置和休息记录保存在本机... ...

8 个 SKILL 的设计逻辑

博主头像 八个 SKILL 分成议题链和交付链:前者把讨论收敛成规格文档里的决定,后者保证实现不偏离设计;每个 SKILL 只说清自己守哪一段边界,以及明确不解决什么。 ...

123···100>