随笔分类 - Memory Management
摘要：一、内存指标 Item 全称 含义 等价 USS Unique Set Size 物理内存 进程独占的内存 PSS Proportional Set Size 物理内存 PSS= USS+ 按比例包含共享库 RSS Resident Set Size 物理内存 RSS= USS+ 包含共享库 VSS
阅读全文
摘要：Lazy TLB (Translation Lookaside Buffer) mode 是操作系统和处理器在管理虚拟内存时的一种优化技术，旨在提高处理器的性能。要理解 Lazy TLB mode，需要先了解一些基本概念： TLB (Translation Lookaside Buffer)：TLB
阅读全文
摘要：在Linux内核中，无论如何切换进程，内核地址空间转换到物理地址的关系是永远不变的，主要原因是内核地址空间在所有进程中是共享的。这种设计有几个关键点： 1. 内核地址空间共享 在Linux操作系统中，每个进程都有自己独立的用户空间地址范围，但内核空间地址范围对所有进程是共享的。具体来说，每个进程的地
阅读全文
摘要：Linux 内核修复办法:内核页表隔离KPTl(kernel page table isolation) 每个进程一张页表变成两张:运行在内核态和运行在用户态时分别使用各自分离的页表 Kernel页表包含了进程用户空间地址的映射和Kernel使用的内存映射 用户页表仅仅包含了用户空间的内存映射以及内
阅读全文
摘要：TLB 是页表项的物理 cache，用于加速虚拟地址到物理地址的转换。CPU 在访问一个虚拟地址时，首先会在 TLB 中查找，如果找不到对应的表项，那么就称之为 TLB miss，此时就需要去内存里查询页表，如果页表项是合法的，那么就会把它添加到 TLB 中。如果内核修改了页表，那么就需要主动的去清
阅读全文
摘要：1. 页表转换寄存器描述符 1.1，页表/页目录结构 基于前言中的内核配置，内核采用39位虚拟地址，因此可寻址范围为2^39 = 512G,采用(linux 默认为五级页表，另外还有PUD,P4D，由于本文只配置三级，其他两项不予罗列)3级页表结构，分别为: PGD (Page Global Dir
阅读全文
摘要：1. 简介 Android的ION子系统的目的主要是通过在硬件设备和用户空间之间分配和共享内存，实现设备之间零拷贝共享内存。说来简单，其实不易。在Soc硬件中，许多设备可以进行DMA，这些设备可能有不同的能力，以及不同的内存访问机制。 ION是Google在Android 4.0 ICS中引入，用于
阅读全文
摘要：使能KSM KSM只会处理通过madvise系统调用显式指定的用户进程地址空间，因此用户程序想使用这个功能就必须在分配地址空间时显式地调用madvise（addr，length，MADV_MERGEA BLE）。如果用户想在KSM中取消某一个用户进程地址空间的合并功能，也需要显式地调用madvise
阅读全文
摘要：DMA应该多多少少知道点吧。DMA(Direct Memory Access)是指在外接可以不用CPU干预，直接把数据传输到内存的技术。这个过程中可以把CPU解放出来，可以很好的提升系统性能。那么DMA和Cache有什么关系呢？这也需要我们关注？ 需要解决什么问题 我们知道DMA可以帮我们在I/O和
阅读全文
摘要：一、配置内核 首先配置内核，使其支持导出内核页表到debugfs下面: Kernel hacking > > [*] Export kernel pagetable layout to userspace via debugfs 配置完后，重新编译内核，并用新内核启动，就会在/sys/kernel/
阅读全文
摘要：背景介绍 在开发微信看一看期间，为了进行耗时优化，基础库这层按照惯例使用tcmalloc替代glibc标配的ptmalloc做优化，CPU消耗和耗时确实有所降低。但在晚上高峰时期，在CPU刚刚超过50%之后却出现了指数上升，服务在几分钟之内不可用。最终定位到是tcmalloc在内存分配的时候使用自旋
阅读全文
摘要：一、前言 C语言提供了动态内存管理功能, 在C语言中, 程序员可以使用 malloc() 和 free() 函数显式的分配和释放内存. 关于 malloc() 和free() 函数, C语言标准只是规定了它们需要实现的功能, 而没有对实现方式有什么限制, 这多少让那些追根究底的人感到有些许迷茫, 比
阅读全文
摘要：在Linux中，透明巨页（Transparent HugePage）和巨页（HugePage）是两种不同的内存管理技术。 透明巨页是Linux内核中的一项特性，旨在提高内存的利用率和性能。它通过将内存分配为更大的巨页（通常为2MB或1GB），减少了对内存页表的访问次数，从而提高了内存访问的效率。透明
阅读全文
摘要：CPU缓存什么东西？当然这个问题很多人有可能觉得比较傻，CPU缓存什么，肯定是缓存数据（代码）啊，要不然还能缓存啥，这个确实没问题，但是CPU到底缓存什么样的数据呢？因为对CPU来说，无论是指令，还是数据，都是数据，他如果要缓存，缓存的单位是啥？要缓存的内容是啥呢？ 接下来咱们一点点解析这部分的内容
阅读全文
摘要：## Page migration 页迁移技术是内核中内存管理的一种比较重要的技术，最早该技术诞生于NUMA系统中（Page migration [LWN.net]），后续由于内存规整以及CMA和COW技术的出现，也需要用到页迁移技术，逐渐称为内核内存子系统中占有比较重要地位。 ## 页迁移在NUM
阅读全文
摘要：所谓反向映射是相对于从虚拟地址到物理地址的映射，反向映射是从物理页面到虚拟地址空间VMA的反向映射。 RMAP能否实现的基础是通过struct anon_vma、struct anon_vma_chain和sturct vm_area_struct建立了联系，通过物理页面反向查找到VMA。 用户在使
阅读全文
摘要：文件映射缺页中断和匿名页面缺页中断主要区别在于缺页时的处理方式和触发原因。 对于文件映射缺页中断，当程序需要访问文件映射的某个页面但该页面尚未调入内存时，就会触发文件映射缺页中断。这时，操作系统会根据文件映射的约定从磁盘加载相应的文件内容到内存中，然后更新页表，使得程序可以继续执行。 而对于匿名页面
阅读全文
摘要：今天我们就来讨论下这种缺页异常，让大家彻底理解它。注：本文使用linux-5.0内核源代码。文章分为以下几节内容： 1. 匿名映射缺页异常的触发情况 2. ０页是什么？为什么使用０页？ 3. 源代码分析 3.1 触发条件 3.2 第一次读匿名页 3.3 第一次写匿名页 3.4 读之后写匿名页 4.
阅读全文
摘要：文件映射和匿名映射都是操作系统中对于内存映射的两种类型，主要应用于进程间的通信或者大量数据的处理。 - 文件映射，也就是内存映射文件，是把一个文件或者文件的一部分映射到进程的地址空间，它允许对文件进行随机访问。当进程对这块内存区域进行读写还操作时，系统会自动把更改写回磁盘文件。这样做的好处是可以像访
阅读全文
摘要：# Linux：/proc/meminfo参数详细解释 ## 一、Linux内存总览图 
浙公网安备 33010602011771号