文章分类 -  YARN

Apache Spark探秘：多进程模型还是多线程模型？(转自董的博客)
摘要：Apache Spark的高性能一定程度上取决于它采用的异步并发模型（这里指server/driver端采用的模型），这与Hadoop 2.0（包括YARN和MapReduce）是一致的。Hadoop 2.0自己实现了类似Actor的异步并发模型，实现方式是epoll+状态机，而Apache Spa... 阅读全文
posted @ 2014-07-20 15:06 圆弧 阅读(555) 评论(0) 推荐(0)
深入理解Hadoop YARN中的Container概念(转载董的博客)
摘要：在学习Hadoop YARN—Hadoop 2.0新引入的通用资源管理系统过程中，总会遇到Container这一概念，由于中文资料的缺乏，很多人对Container这一概念仍非常的模糊。它 与Linux Container是什么关系，它是否能像Linux Container那样为任务提供一个隔离环境... 阅读全文
posted @ 2014-07-20 11:03 圆弧 阅读(1026) 评论(0) 推荐(0)