会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
Ghose
博客园
首页
新随笔
联系
订阅
管理
2022年4月9日
spark算子的理解
摘要: 1)Value数据类型的Transformation算子 一、输入分区与输出分区一对一型 1、map算子 一次一个,一进一出。每个元素都调用一下我给的函数 2、flatMap算子 与上面map一样,不过最后把数组或者容器拆散,放入RDD中 3、mapPartitions算子 一次一批数据,优点比ma
阅读全文
posted @ 2022-04-09 11:04 Ghose
阅读(76)
评论(0)
推荐(0)
公告