2014年5月31日
Hadoop2.0(HDFS2)以及YARN设计的亮点
摘要： YARN总体上仍然是Master/Slave结构，在整个资源管理框架中，ResourceManager为Master，NodeManager为Slave，ResouceManager负责对各个NodeManager上的资源进行统一管理和调度。当用户提交一个应用程序时，需要提供一个用以跟踪和管理这个程... 阅读全文
posted @ 2014-05-31 16:56 yanghuahui 阅读(6316) 评论(0) 推荐(1)
Hadoop YARN资源隔离技术
摘要： YARN对内存资源和CPU资源采用了不同的资源隔离方案。对于内存资源，它是一种限制性资源，它的量的大小直接决定应用程序的死活，因为应用程序到达内存限制，会发生OOM，就会被杀死。CPU资源一般用Cgroups进行资源控制，Cgroups控制资源测试可以参见这篇博文Cgroups控制cpu，内存，io... 阅读全文
posted @ 2014-05-31 15:41 yanghuahui 阅读(5671) 评论(0) 推荐(1)