05 2009 档案
hadoop Map Stage流程分析
摘要:hadoop Map Stage流程分析 阅读全文
posted @ 2009-05-25 13:02 彭帅 阅读(3146) 评论(2) 推荐(0)
hadoop作业调度 - 源码分析
摘要:TaskScheduler是作业调度器的抽象基类. 具体的实现有: JobQueueTaskScheduler: 默认的FIFO调度队列 LimitTasksPerJobTaskScheduler: 扩展自JobQueueTaskScheduler, 可以对每个Job的task总数作限制. CapacityScheduler: Yahoo开发的一个基于容量的作业调度器 FairScheduler: 公平调度器, 保证小任务得到快速响应, 大任务保证服务水平, 由facebook开发. 阅读全文
posted @ 2009-05-20 14:03 彭帅 阅读(5813) 评论(10) 推荐(1)