2018年9月26日
Hadoop提交作业流程
摘要： 一 、需要知道的内容 1.ResourceManager >yarn的老大 2.NodeManager >yarn的小弟 3.ResourceManager调度器 a.默认调度器 >先进先出FIFO b.公平调度器 >每个任务都有执行的机会...... 4.心跳机制 >NodeManager可通过心 阅读全文
posted @ 2018-09-26 16:34 大嗯呐丶 阅读(1580) 评论(0) 推荐(0) 编辑
HDFS常用shell命令
摘要： 注，其实常用命令不用网上搜，和linux下的命令很类似，触类旁通，直接在linux 上 hadoop fs 看一下就行了，不需要刻意去记我把 linux 上的 help 列举下，方便直接看吧，hdfs dfs 与 hadoop fs 效果一样常用的就是hdfs dfs -copyFromLocal 阅读全文
posted @ 2018-09-26 16:26 大嗯呐丶 阅读(456) 评论(0) 推荐(0) 编辑