随笔分类 -  Yarn

摘要:MAPREDUCE-3451, 把fairScheduler引入到2.0.2-alpha, 本文介绍一下hadoop 2.0.2-alpha的fairscheduler. 包括调度算法和配置方法. 阅读全文
posted @ 2012-12-09 14:37 南国故人(Wall) 阅读(4002) 评论(0) 推荐(0)
摘要:本文介绍了NodeManager的启动流程与服务. 阅读全文
posted @ 2012-11-24 13:59 南国故人(Wall) 阅读(3374) 评论(0) 推荐(0)
摘要:本文解释了ApplicationMaster启动container并与其通信的机制. 阅读全文
posted @ 2012-11-24 13:53 南国故人(Wall) 阅读(3323) 评论(0) 推荐(0)
摘要:本文解释了Yarn的客户端为何即可以向RM, 又可以向Jobtracker或本地提交作业; 并且老版本的mapreduce作业不需要任何修改即可使用yarn客户端提交. 阅读全文
posted @ 2012-11-24 12:48 南国故人(Wall) 阅读(2174) 评论(0) 推荐(0)
摘要:介绍了 hadoop Capacity Scheduler 的使用方法 阅读全文
posted @ 2012-11-20 12:01 南国故人(Wall) 阅读(2083) 评论(0) 推荐(1)