2019年1月13日
hadoop启动后，9000端口无法连接，netstat -tpnl中找不到该端口
摘要： 已解决： 需要重新格式化hdfs。 1、停止hdfs； 2、删除hdfs的相关文件目录（hdfs-site.xml中配置的存放文件的目录）。 3、启动journalnode：sbin/hadoop-daemon.sh start journalnode； 4、格式化namenode：hdfs nam 阅读全文
posted @ 2019-01-13 01:36 猿大侠 阅读(2959) 评论(0) 推荐(1)
2019年1月12日
HDFS ha 格式化报错：a shared edits dir must not be specified if HA is not enabled.
摘要： 错误内容： Formatting using clusterid: CID-19921335-620f-4e72-a056-899702613a6b2019-01-12 07:28:46,986 INFO namenode.FSEditLog: Edit logging is async:true2 阅读全文
posted @ 2019-01-12 23:48 猿大侠 阅读(7447) 评论(0) 推荐(0)
2018年12月5日
为什么zookeeper的节点配置的个数必须是奇数个
摘要： 选举机制(FastLeaderElection算法)：sid最大且被超过集群中超过半数的机器拥护就会成为leader.所以只有两种情况无法选出leader：整个集群只有2台服务器（注意不是只剩2台，而是集群的总节点数为2）整个集群超过半数机器挂掉。 所谓的偶数问题其实是另一个集群优化配置问题，即:集 阅读全文
posted @ 2018-12-05 23:26 猿大侠 阅读(1633) 评论(0) 推荐(0)
2018年11月27日
使用root配置的hadoop并启动会出现报错
摘要： 1、使用root配置的hadoop并启动会出现报错 错误： Starting namenodes on [master] ERROR: Attempting to operate on hdfs namenode as root ERROR: but there is no HDFS_NAMENOD 阅读全文
posted @ 2018-11-27 01:39 猿大侠 阅读(19368) 评论(0) 推荐(0)