摘要: 1、SaveMode模式 当启动hdfs的30秒内,会进入SaveMode模式。 进入Namenode information界面时,是看不到Summary里的具体信息的。 2、在启动时,NameNode进入一个称为Safemode的特殊状态。当NameNode处于Safemode状态时,不会复制数 阅读全文
posted @ 2021-07-07 16:27 酱汁怪兽 阅读(346) 评论(0) 推荐(0)
摘要: 1、HDFS元数据管理(在命令行中的操作) 2、HDFS元数据在命令行中的存储表现形式 3、一旦机器故障重启,HDFS数据的恢复原理 阅读全文
posted @ 2021-07-07 16:03 酱汁怪兽 阅读(152) 评论(0) 推荐(0)
摘要: 1、3个副本机制 (1)2个副本放在本地机架上的不同节点,1个副本放在另外机架上的节点。 (2)1个副本放在本机机架上的节点,2个副本放在另外一个机架上的不同节点。 2、客户端写数据到HDFS的流程 3、客户端从HDFS读取数据的流程 阅读全文
posted @ 2021-07-07 13:57 酱汁怪兽 阅读(122) 评论(0) 推荐(0)
摘要: 1、CaseIgnoreWordCountMapper.java 文件中的大小写默认是有区分。所以大小写分别记作一个单词。 此处将所有大写转变为小写:复制 WordCountMapper.java 为 CaseIgnoreWordCountMapper.java 将: String[] words 阅读全文
posted @ 2021-07-07 09:41 酱汁怪兽 阅读(45) 评论(0) 推荐(0)
摘要: 1、在HDFSWordCountApp01.java中,不建议采取以下方式新建mapper对象 ImoocMapper mapper = new WordCountMapper(); 2、WordCount.properties 在WordCount.properties中,添加WordCountM 阅读全文
posted @ 2021-07-07 09:03 酱汁怪兽 阅读(95) 评论(0) 推荐(0)