|NO.Z.00014|——————————|BigDataEnd|——|Hadoop&Spark.V02|——|Spark.v02|sparkcore|RDD编程&RDD编程模型|

一、RDD编程模型
### --- RDD编程模型

~~~     RDD表示数据对象
~~~     通过对象上的方法调用来对RDD进行转换
~~~     最终显示结果 或 将结果输出到外部数据源
~~~     RDD转换算子称为Transformation是Lazy的(延迟执行)
~~~     只有遇到Action算子,才会执行RDD的转换操作
### --- 要使用Spark,需要编写 Driver 程序,它被提交到集群运行

~~~     Driver中定义了一个或多个 RDD ,并调用 RDD 上的各种算子
~~~     Worker则执行RDD分区计算任务

 
 
 
 
 
 
 
 
 

Walter Savage Landor:strove with none,for none was worth my strife.Nature I loved and, next to Nature, Art:I warm'd both hands before the fire of life.It sinks, and I am ready to depart
                                                                                                                                                   ——W.S.Landor

 

 

posted on 2022-04-12 13:02  yanqi_vip  阅读(26)  评论(0)    收藏  举报

导航