work hard work smart

专注于Java后端开发。 不断总结，举一反三。
  博客园  :: 首页  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理

2021年1月31日

资源调度框架YARN介绍

摘要： 1、YARN架构 图片来自： https://hadoop.apache.org/docs/r3.2.2/hadoop-yarn/hadoop-yarn-site/YARN.html 1个RN（ResourceManager）和多个NM(NodeManager) ResourceManager职责： 阅读全文

posted @ 2021-01-31 23:09 work hard work smart 阅读(177) 评论(0) 推荐(0)

MapReduce介绍

摘要： 这里简单介绍下MapReduce 1、什么是MapReduce 1、源自Google的MapReduce论文 2、发表于2004年12月，Hadoop MapReduce是Google MapReduce的克隆版 2、MapReduce特点 易于编程 良好的扩展性 高容错性 海量数据的离线处理 3、 阅读全文

posted @ 2021-01-31 12:20 work hard work smart 阅读(202) 评论(0) 推荐(0)