2014年10月1日

Spark技术内幕之任务调度：从SparkContext开始

摘要： SparkContext是开发Spark应用的入口，它负责和整个集群的交互，包括创建RDD，accumulators and broadcast variables。理解Spark的架构，需要从这个入口开始。下图是官网的架构图。DriverProgram就是用户提交的程序，这里边定义了SparkC... 阅读全文

posted @ 2014-10-01 21:17 wu2198 阅读(133) 评论(0) 推荐(0)

导航