Hadoop性能调优
摘要：
1 硬件选择 主要区分NAMENODE与DATANODE的功能需求，NN维护全局元数据信息，随着保存的INODES数量的增加，对内存需求增加，按每一百万INODES一G来粗略计算，JVM的XMX参数需要动态调整。 2 OS参数调优 操作系统，生产环境中都使用LINUX，以下就是指对LINUX系统的参数调优。 A.增加同时打开的文件描述符和网络连接上限 在系统运行中，随着接受作业数量的增加... 阅读全文
posted @ 2017-01-10 21:07 tneduts 阅读(2724) 评论(0) 推荐(0) 编辑
