07 2021 档案

摘要:hadoop在启动namenode和datanode之后,两者之间是如何联动了?datanode如何向namenode注册?如何汇报数据?namenode又如何向datanode发送命令? 心跳机制基础概念 ​ 心跳就是HDFS中从节点DataNode周期性的向名字节点DataNode做汇报,汇报自 阅读全文
posted @ 2021-07-21 13:59 坐井 阅读(457) 评论(0) 推荐(0)
摘要:执行start-dfs.sh脚本后,集群是如何启动的? 本文阅读并注释了start-dfs脚本,以及datanode的启动主要流程流程源码。 DataNode 启动流程 脚本代码分析 start-dfs.sh中启动datanode的代码: # # datanodes (using default w 阅读全文
posted @ 2021-07-15 17:37 坐井 阅读(825) 评论(0) 推荐(1)
摘要:执行start-dfs.sh脚本后,集群是如何启动的? 本文阅读并注释了start-dfs脚本,以及namenode和datanode的启动主要流程流程源码。 阅读源码前准备 源码获取 拉取Apache Hadoop官方源码 https://github.com/apache/hadoop 用ide 阅读全文
posted @ 2021-07-09 14:49 坐井 阅读(1086) 评论(0) 推荐(1)