2019年8月19日
大数据 — Spark笔记1
摘要： Spark（笔记） spark运行模式： 本地模式 standalone模式：独立集群（封闭） yarn模式：（开放） yarn-client：AM（driver）在提交任务的本地启动 （交互 / 调试方便） yarn-cluster：AM（driver）在某个NN上启动 yarn-client：A 阅读全文
posted @ 2019-08-19 21:11 带了1个小才艺 阅读(152) 评论(0) 推荐(0)
大数据 — Spark-RDD
摘要： Spark 1. RDD abstract class RDD[T: ClassTag]( @transient private var _sc: SparkContext, @transient private var deps: Seq[Dependency[_]] ) extends Seri 阅读全文
posted @ 2019-08-19 17:39 带了1个小才艺 阅读(135) 评论(0) 推荐(0)