yarn学习

hadoop学习: https://space.bilibili.com/286405861/channel/seriesdetail?sid=2056785

hadoop安装视频: https://www.bilibili.com/video/BV1x5411177Y/?spm_id_from=autoNext&vd_source=b879d4ff10c4ff63bbd44d7f0839ffa2  (3版本)

hadoop安装视频: https://www.bilibili.com/video/BV1C5411c7Qv?p=1&vd_source=b879d4ff10c4ff63bbd44d7f0839ffa2(2版本)

1. 作用: 管理分配集群资源; 2.监控任务执行;

2. 主从架构, 主有两个进程ResourceManagerNodeManager, 从有1个进程NodeManager. ("从"由主节点拉起进程和结束进程).   

  2.1 启动命令: 主: start-yarn.sh,   它执行时读取workers文件的节点信息, 通过ssh方式启动每个节点的NodeManager;   

  2.2 每个节点启动后查yarn-site.xml中配置的"yarn.resourcemanager.hostname", 并向其注册;

3

posted @ 2023-09-13 11:25  trump2  阅读(21)  评论(0)    收藏  举报