摘要： 8.3 HDFS-HA集群配置 8.3.1 环境准备 1. 修改IP 2. 修改主机名及主机名和IP地址的映射 3. 关闭防火墙 4. ssh免密登录 5. 安装JDK，配置环境变量等 8.3.2 规划集群 表3-1 hadoop102 hadoop103 hadoop104 NameNode Na 阅读全文

摘要： Yarn资源调度器 Yarn是一个资源调度平台，负责为运算程序提供服务器运算资源，相当于一个分布式的操作系统平台，而MapReduce等运算程序则相当于运行于操作系统之上的应用程序。 Yarn基本架构 YARN主要由ResourceManager、NodeManager、ApplicationMas 阅读全文

摘要： 1.1 MapReduce定义 1.2 MapReduce优缺点 1.2.1 优点 1.2.2 缺点 1.3 MapReduce核心思想 1）分布式的运算程序往往需要分成至少2个阶段。 2）第一个阶段的MapTask并发实例，完全并行运行，互不相干。 3）第二个阶段的ReduceTask并发实例互不 阅读全文

摘要： 1.1.HDFS. 它是一个分布式文件管理系统，用来存储文件，通过目录树来定位文件；由多个服务器联合起来实现功能，集群中的服务器有各自的角色。 适用场景：适合一次写入，多次读出的场景，且不支持文件的修改。适合用来做数据的分析，并不适合用来做网盘应用。 1.1.1NameNode：就是master，它 阅读全文

摘要： 帮助命令 man和help都是帮助命令，man+命令名，help+命令名，但是man是用来显示Liunx里的命令，help是用来显示shell里面的帮助命令。 命令查找网址 1.https://wangchujiang.com/linux-command/ 2.https://linuxtools- 阅读全文

摘要： 1.shell的心得 学习shell的时候必须把重点放在流程控制上和shell工具上。一定要用心记语法和命令。 2.介绍shell shell是一种解释型语言，程序不需要编译，程序在运行时由解释器翻译成机器语言，每执行一次都要翻译一次。因此解释型语言效率低。 其实也是一种编译型语言。程序在运行之前就 阅读全文

摘要： 1.学习Linux的心得 学习Linux就是一些命令开始是创建虚拟机，必须有Centos镜像然后安装就有完整的虚拟机了，然后安装复制粘贴的和win系统链接，然后就是一些命令，最主要是背记学的Linux的命令和作用。 2.Linux的发展史 l 1965 年左后由贝尔实验室加入了 麻省理工学院 以及  阅读全文

摘要： Map：put： HashMap： a:添加功能 * V put(K key,V value):添加元素。 * 如果键是第一次存储，就直接存储元素，返回null * 如果键不是第一次存在，就用值把以前的值替换掉，返回以前的值 Set<Map.Entry<K,V>> entrySet():拿到所有的键 阅读全文

摘要： 集合的继承图如下： Collection：这个下面存的都是单列集合它的子类list。。是有序的。。。Set是无序的 List可以存储重复的元素 Set不能存储重复的元素Set的元素有唯一性 List：是有序的集合 Set：是无序的集合 ArrayList：可以根据String里的contains方法 阅读全文

摘要： A: StringBuffer指字符串缓冲区 * String是一个不可变的字符序列 * StringBuffer是一个可变的字符序列 B：:StringBuffer的构造方法： public StringBuffer():无参构造方法 public StringBuffer(int capacit 阅读全文