摘要：原文转自博客：http://www.oratea.net/?p=799，添加一些修改 。DatanodeProtocol.java 路径：hadoop-0.19.2\src\hdfs\org\apache\hadoop\hdfs\server\protocol\DatanodeProtocol.javaDatanodeProtocol是DataNode与NameNode通信的信息接口，接口定义了DataNode向ameNode发起的全部操作。1 public static final long versionID = 19L;这个标识了协议的版本信息，对于0.19.2来说是19L。2 fina 阅读全文

摘要：http://www.kuqin.com/system-analysis/20111221/316517.html hadoop的分布式管理工具http://www.tbdata.org/archives/1470 淘宝关于hadoop的性能调优 当job指定了combiner的时候，我们都知道map介绍后会在map端根据combiner定义的函数将map结果进行合并。运行combiner函数的时机有可能会是merge完成之前，或者之后，这个时机可以由一个参数控制，即min.num.spill.for.combine（default 3），当job中设定了combiner，并且spill数最少 阅读全文

摘要：转自：http://icooke.blog.51cto.com/4123148/757555http://desert.blog.51cto.com/779694/200270http://www.arjiu.com/archives/462.html自己的cpu是两颗四核的cpu未使用超线程 ，总共8核8线程 。判断依据：1.具有相同core id的cpu是同一个core的超线程。2.具有相同physical id的cpu是同一颗cpu封装的线程或者cores。英文版：1.Physical id and core id are not necessarily consecutive but 阅读全文