摘要：
首先下载 kafka 0.11.0.3 版本 源码： http://archive.apache.org/dist/kafka/0.11.0.3/kafka-0.11.0.3-src.tgz 下载源码 首先安装 gradle，不再说明 1. 解压缩source压缩包： 2. 进入项目根目录下，执行 阅读全文
摘要：
由脚本找到 RM 主类 这部分，我们从脚本作为入口去逐步深入ResourceManager源码。 从 Hadoop 官方文档 中可以看到 ResourceManager 的启动命令为： Usage: yarn resourcemanager [-format-state-store] 定位到 源代码 阅读全文
摘要：
先做如下声明，本代码版本是基于 3.1.2 版本。 其实，我们自己在写代码的时候，会有意识地将比较大的功能项独立成包，独立成module， 独立成项目，项目之间的关系既容易阅读理解，又便于管理。 如下，是hadoop-yarn-project的module截图： Hadoop YARN 的大部分功能 阅读全文
摘要：
1. 先从官方下载源码：源码下载地址：https://hadoop.apache.org/releases.html，下载 3.1.2 版本 2. 解压缩源码：tar xvf hadoop-3.1.2-src.tar.gz 3. 安装依赖（注：由于我本机环境不是从零开始安装的，部分步骤省略掉）： 3 阅读全文
摘要：
下图简单明了的描述了hadoop yarn 的功能是如何从 hadoop 中细化出来的。 注：图片来自 https://apprize.info/php/hadoop/9.html Hadoop 从 v2 开始，将资源调度与监控、任务作业的管理单独从 Hadoop 中抽取出来，即 原来的 JobTr 阅读全文