随笔分类 -  hadoop

Hbase设置多个hmaster
摘要：为了保证HBase集群的高可靠性，HBase支持多Backup Master 设置。当Active Master挂掉后，Backup Master可以自动接管整个HBase的集群。该配置极其简单：在$HBASE_HOME/conf/ 目录下新增文件配置backup-masters，在其内添加要用做B... 阅读全文

posted @ 2015-10-10 13:45 诗圆 阅读(9085) 评论(1) 推荐(0)

模拟namenode挂掉利用secondary namenode恢复
摘要：测试机器：10.0.50.144 master （namenode，datanode）10.0.50.145 node1 （datanode）10.0.50.146 node2 （datanode）一、在hdfs正常启动后执行以下命令查看目录/tmp 内容[hbase@master sbin]$... 阅读全文

posted @ 2015-09-24 14:34 诗圆 阅读(5172) 评论(0) 推荐(0)

HDFS中datanode节点block损坏后的自动恢复过程
摘要：相关参数说明dfs.blockreport.intervalMsec ：datanode向namenode报告块信息的时间间隔，默认6小时datanode日志中记录如下：dfs.datanode.directoryscan.interval：datanode进行内存和磁盘数据集块校验，更新内存中的信... 阅读全文

posted @ 2015-09-18 17:09 诗圆 阅读(14421) 评论(1) 推荐(1)

导航