2019年7月25日

spark大数据快速分析第二章

摘要： 1、驱动程序通过一个SparkContext对象来访问Spark，此对象代表对计算集群的一个连接。shell已经自动创建了一个SparkContext对象。利用SparkContext对象来创建一个RDD 2、spark和mapreduce区别 mapreduce分为两个阶段map和reduce，两 阅读全文

posted @ 2019-07-25 19:09 hdc520 阅读(318) 评论(0) 推荐(0)

spark的知识的链接

摘要： IDEA 创建scala spark的Mvn项目：https://blog.csdn.net/u014646662/article/details/84618032 Spark详解03Job 物理执行图：https://www.jianshu.com/p/c1ee13c50b7a Spark Sta 阅读全文

posted @ 2019-07-25 10:05 hdc520 阅读(187) 评论(0) 推荐(0)

导航