摘要: spark简述 sparkContext在Spark应用程序的执行过程中起着主导作用,它负责与程序和spark集群进行交互,包括申请集群资源、创建RDD、accumulators及广播变量等。sparkContext与集群资源管理器、work节点交互图如下: 官网对图下面几点说明: (1)不同的Sp 阅读全文
posted @ 2017-09-07 11:50 楚时邀月 阅读(13322) 评论(0) 推荐(3) 编辑