图说大数据基础

大数据开发基础上之图说笔记

1、Hadoop2概览 

    1.1Hadoop2的组成、演化：

 

    1.2Hadoop2.0——Hadoop1.0演化与改进：

2、HDFS系统概览

    2.1HDFS系统的主要特性与适用场景：

    2.2HDFS的体系结构：

    2.3HDFS的构成

     2.4HDFS的读流程：

 

 

 

    2.5HDFS创建子路径流程：

 

 

 

     2.6写流程和删除流程

 

  

3 YARN概览

    3.1Hadoop1.x中的MapReduce构成及特点：

 

      3.2 Yarn的结构图和主要组件：

 

3.3 YARN的工作流程图：

 

 

 

 4 MapReduce概览

    4.1 MapReduce的执行流

 

 

 

    4.2 MapReduce2整体结构图：

 

 

 

     4.3 MapReduce2的进度状态更新图：

 

 

 

    4.4 shuffle图解：