随笔分类 -  Hadoop随记

摘要：交代一下背景： 1. 由于机器过保，需要进行机器的置换，所以就有了这么个事情; 2. namenode是普通的ha模式，没有配置federation; 3. 需要尽最大的可能不影响生产环境中Hadoop集群的服务 4. 我们的集群都是通过hostname进行的配置，不是通过具体的ip进行的配置。推荐 阅读全文

摘要：由于目前的生产环境 namenode ha都只是配置了一块磁盘，如果磁盘坏了，估计就game over了。所以想着怎样做namenode的元数据容错。后来查阅hdfs的相关配置，发现一个恰好可以解决该问题的配置: <property> <name>dfs.namenode.name.dir</nam 阅读全文