合集-理论&实践教程

摘要：本文由 愚人猫(Idiomeo) 编写 建议查看博客原文 一.LLM 的数学基础 大语言模型 (LLM) 的底层实现离不开扎实的数学基础，这部分将系统梳理支撑 LLM 的核心数学理论，为后续的代码实现奠定理论基础。 线性代数：LLM 的基础语言 线性代数是理解和实现 LLM 的基础，特别是矩阵运算构 阅读全文

摘要：本文由 愚人猫(Idiomeo) 编写 推荐阅读我的博客原文 一.介绍 数据压缩是现代计算机科学和通信技术中不可或缺的组成部分，它通过减少数据表示所需的存储空间和传输带宽，极大地提高了系统效率和资源利用率。压缩算法可分为两大类：无损压缩和有损压缩。 无损压缩算法能够在解压缩后完全恢复原始数据，适用于 阅读全文

摘要：本文由 愚人猫(Idiomeo) 编写 推荐阅读我的博客原文，排版更好 类脑AI架构BriLLM的介绍 在当前的大语言模型领域，Transformer 架构已经成为绝对主流，支撑着 GPT、BERT 等众多强大的语言模型。然而，这种基于注意力机制的架构存在着一些根本性的局限：黑箱不透明性、二次方复杂 阅读全文

摘要：本文由 愚人猫(Idiomeo) 编写 推荐看我的博客原文 Flex 与 Bison 快速入门：打造脚本语言前端 一、介绍 在现代软件开发中，编译器和解释器是许多高级语言的基础架构。而词法分析和语法分析则是编译器前端的核心组成部分。Flex 和 Bison 作为开源的词法分析器和语法分析器生成工具， 阅读全文

摘要：本文由 愚人猫（Idiomeo） 编写 欢迎查看我的博客原文 一.为什么需要打洞技术？ 在当今的网络环境中，大多数设备都位于网络地址转换 (NAT) 设备之后，这导致了一个普遍存在的问题：如何让位于不同 NAT 设备后的两个设备直接建立通信？ 这个问题在 P2P 应用中尤为突出，如在线游戏、视频会议 阅读全文

摘要：本文由 愚人猫（Idiomeo） 编写 欢迎查看我的博客原文 一. 概率学与编程的交汇 概率统计是计算机科学的基础学科之一，从数据科学到人工智能，从金融风控到游戏开发，概率模型无处不在。作为计算机学者，理解概率理论并将其转化为可执行代码的能力至关重要。本文将带领读者将数学中的六个经典概率公式与模型转 阅读全文