摘要：1. 先切换到hdfs 用户，做免密码登录 ssh -keygen -t rsa touch /var/lib/hadoop-hdfs/.ssh/authorized_keys chmod 755 /var/lib/hadoop-hdfs/.ssh/authorized_keys 把两台hdfs 用 阅读全文

摘要：1. mapreduce.job.reduce.slowstart.completedmaps: 在往hbase表里通过bulkload导数据时，某个mapreduce跑了一个多小时还没跑，看yarn界面，发现map还有一小部分没跑完，没跑完的map全在pending，running中没有，同时re 阅读全文

摘要：一、HDFS基础知识 1. namenode 负责: 管理着文件系统命名空间 <!--WizRtf2Html Charset=134 --> – <!--WizRtf2Html Charset=134 -->维护着文件系统树及树中的所有文件和目录 管理着文件系统命名空间 存储元数据 <!--WizR 阅读全文

摘要：1.在管理Hadoop 集群时， 有时会遇见：No route to host 问题 解决办法：尝试关闭机器防火墙 阅读全文

摘要：9. Determine HDP Memory Configuration Settings Two methods can be used to determine YARN and MapReduce memory configuration settings: Use the HDP Util 阅读全文

摘要：An HDFS DataNode has an upper bound on the number of files that it will serve at any one time: <property> <name>dfs.datanode.max.transfer.threads</nam 阅读全文