摘要： Hadoop 集群的搭建 我有一个虚拟机是用来克隆的，里面设置了java环境，开启不启动防火墙的配置。 准备： 1.我的3个虚拟机： hu_hadoop1(主+从):nameNode+dataNode+ResouceManager hu_hadoop2(从):dataNode+nodeManager 阅读全文

摘要： YARN Hadoop三大核心 mapreduce负责分布式计算 HDFS : 负责分布式文件管理，副本机制，机架策略（需要让Hadoop感知交换机）读流长，写流程，日志文件和镜像文件 主从模式单点故障模式 YARN : 负责分布式资源管理 1.客户端携带的jar就去找ResourceManage计 阅读全文

摘要： 垃圾收集算法 1.标记 - 清除算法（Mark-Sweep） 注意：在这个算法中的不足 1.效率问题，标记和清除两个过程的效率都不高， 2.另一个是空间问题，标记清除后会产生大量的不连续的内存碎片，空间内存碎片太多可能导致一户在程序运行过程中需要分配较大的对象时，无法找到足够的连续的内存而不得不提前 阅读全文