摘要：1 情况概述 公司的开发集群在周末莫名其妙的主节点Hadoop-1的启动固态盘挂了，由于CM、HDFS的NameNode、HBase的Master都安装在Hadoop-1，导致了整个集群都无法使用，好在数据不在启动盘。 Hadoop-1的系统必须重装，但是不能重装集群，因为要将之前的数据全部保留恢复 阅读全文

摘要：前言 由于项目数据安全的需要，这段时间看了下hadoop的distcp的命令使用，不断的纠结的问度娘，度娘告诉我的结果也让我很纠结，都是抄来抄去， 还好在牺牲大量的时间的基础上还终于搞出来了，顺便写这个随笔，记录下。 环境 目前我们是两套同版本的CDH集群，集群内的节点通信使用的私网，提供浮动ip对 阅读全文

摘要：前言 在使用cdh集群过程中，难免会因为某些不可抗拒的原因导致节点IP或hostName变动，而cm的监控界面无法完成这些事情，但是cm将集群中所有的主机的信息都存在postgresql数据库的hosts表中， 现在让我们来通过修改hosts来完成这个操作。第一步，关闭服务1. 关闭集群服务，及 ... 阅读全文

摘要：前言 其实cloudera已经做了这个事了，只是把kafka的包和cdh的parcel包分离了，只要我们把分离开的kafka的服务描述jar包和服务parcel包下载了，就可以实现完美集成了。具体实现的简要步骤可参照cloudera官网提供的文档：http://www.cloudera.com... 阅读全文