摘要：步骤如下：1.copy 另外一台的datanode的配置到该datanode上，配置好jdk,ssh. 验证ssh:在namenode 上ssh 即可：The authenticity of host '[hadoop-datanode-8096]:16322 ([172.16.80.96]:16322)' can't be established.RSA key fingerprint is b2:4f:67:69:d5:c6:4f:b5:0a:4d:28:61:b2:c4:11:70.Are you sure you want to continue connect 阅读全文

摘要：工作中有一套hadoop集群，该集群也作为对外的nginx服务，用来存储了大量的图片。近期nginx访问经常出现超时访问的情况。查看log，发现原来的report 频率为1小时一次，但是由于report 需要收集datanode 上的block使用情况，（该机的block达到上百万级别），会造成读和写的阻塞。解决方法：<property> <name>dfs.blockreport.intervalMsec</name> <value>86400000</value> <description>Determines blo 阅读全文