luozhiyun

摘要： 我们先回想一下Kafka的日志结构是怎样的？ Kafka 日志对象由多个日志段对象组成，而每个日志段对象会在磁盘上创建一组文件，包括消息日志文件（.log）、位移索引文件（.index）、时间戳索引文件（.timeindex）以及已中止（Aborted）事务的索引文件（.txnindex）。当然，如 阅读全文

摘要： https://www.luozhiyun.com/archives/291 Linux的文件系统 文件系统的特点 文件系统要有严格的组织形式，使得文件能够以块为单位进行存储。 文件系统中也要有索引区，用来方便查找一个文件分成的多个块都存放在了什么位置。 如果文件系统中有的文件是热点文件，近期经常被 阅读全文

摘要： 我的博客： https://www.luozhiyun.com/archives/273 InnoDB页 将数据划分为若干个页，以页作为磁盘和内存之间交互的基本单位，InnoDB中页的大小一般为 16 KB。也就是在一般情况下，一次最少从磁盘中读取16KB的内容到内存中，一次最少把内存中的16KB内 阅读全文

摘要： 我的博客：https://www.luozhiyun.com/archives/269 '==' VS 'is' '=='操作符比较对象之间的值是否相等。 'is'操作符比较的是对象的身份标识是否相等，即它们是否是同一个对象，是否指向同一个内存地址。 如： Python 会为 10 这个值开辟一块内 阅读全文

摘要： 我的个人博客排版更舒服： https://www.luozhiyun.com/archives/264 列表和元组 列表是动态的，长度大小不固定，可以随意地增加、删减或者改变元素（mutable）。 而元组是静态的，长度大小固定，无法增加删减或者改（immutable）。 如果你想对已有的元组做任何 阅读全文

摘要： 我的个人博客排版更舒服： https://www.luozhiyun.com/archives/260 基本概念 Kafka 体系架构 Kafka 体系架构包括若干 Producer、若干 Broker、若干 Consumer，以及一个 ZooKeeper 集群。 在 Kafka 中还有两个特别重要 阅读全文

摘要： 我的个人博客：https://www.luozhiyun.com/ 为什么需要Spark？ MapReduce的缺陷 第一，MapReduce模型的抽象层次低，大量的底层逻辑都需要开发者手工完成。 第二，只提供Map和Reduce两个操作。 举个例子，两个数据集的Join是很基本而且常用的功能，但是 阅读全文

摘要： 我的博客：https://www.luozhiyun.com/ 内存 内存是五大组成部分里面的存储器，我们的指令和数据，都需要先加载到内存里面，才会被CPU拿去执行。 我们的内存需要被分成固定大小的页（Page），然后再通过虚拟内存地址（Virtual Address）到物理内存地址（Physica 阅读全文

摘要： 我的博客 ： https://www.luozhiyun.com/ 超线程 超线程的CPU，其实是把一个物理层面CPU核心，“伪装”成两个逻辑层面的CPU核心。这个CPU，会在硬件层面增加很多电路，使得我们可以在一个CPU核心内部，维护两个不同线程的指令的状态信息。 比如，在一个物理CPU核心内部， 阅读全文

摘要： 我的博客： https://www.luozhiyun.com/ 浮点数和定点数 我们先来看一个问题，在Chrome浏览器里面通过开发者工具，打开浏览器里的Console，在里面输入“0.3 + 0.6”： >>> 0.3 + 0.6 0.8999999999999999 下面我们来一步步解释，为什 阅读全文