随笔分类 -  hadoop

摘要：resourcemanager向nodemanager的心跳间隔 阅读全文

摘要：做作业的过程中发现，把一节点停掉，dfsadmin和50070都无法马上感知到一个data node已经死掉 HDFS默认的超时时间为10分钟+30秒。这里暂且定义超时时间为timeout计算公式为： 而默认的heartbeat.recheck.interval 大小为5分钟，dfs.heartbe 阅读全文

摘要：前言 Hadoop在大数据技术体系中的地位至关重要，Hadoop是大数据技术的基础，对Hadoop基础知识的掌握的扎实程度，会决定在大数据技术道路上走多远。 这是一篇入门文章，Hadoop的学习方法很多，网上也有很多学习路线图。本文的思路是：以安装部署Apache Hadoop2.x版本为主线，来介 阅读全文

摘要：hadoop，hbase，hive，zookeeper整合可行性分析及版本确定 问题导读1.如何确定什么版本是稳定版本？2.本文是如何确定各个版本的？3.hbase1.x与hive1.x什么情况下是兼容的？前面一篇写过hadoop,hbase,hive，zookeeper版本整合兼容性最全，最详细说 阅读全文

摘要：hadoop 和hbase 版本兼容矩阵： 阅读全文