yetang307

  博客园  :: 首页  :: 新随笔  :: 联系 :: 订阅 订阅  :: 管理
RDD 数据结构内部有五个特性(摘录RDD 源码):
前三个特征每个RDD都具备的,后两个特征可选的。
Spark RDD 编程的程序入口对象是SparkContext对象(不论何种编程语言)
只有构建出SparkContext, 基于它才能执行后续的API调用和计算
本质上, SparkContext对编程来说, 主要功能就是创建第一个RDD出来
RDD的创建主要有2种方式:
• 通过并行化集合创建 ( 本地对象 转 分布式RDD )
• 读取外部数据源 ( 读取文件 )
posted on 2024-01-15 22:08  椰糖  阅读(2)  评论(0编辑  收藏  举报