2021年7月16日
GroupByKey
摘要： package sparkcoreimport org.apache.spark.rdd.RDDimport org.apache.spark.{SparkConf, SparkContext}object Demo07GroupByKey { def main(args: Array[String 阅读全文
posted @ 2021-07-16 23:25 tonggang_bigdata 阅读(148) 评论(0) 推荐(1)
算子map
摘要： package sparkcoreimport org.apache.spark.rdd.RDDimport org.apache.spark.{SparkConf, SparkContext}object Demo02Map { def main(args: Array[String]): Uni 阅读全文
posted @ 2021-07-16 23:23 tonggang_bigdata 阅读(57) 评论(0) 推荐(1)
spark学习
摘要： Spark概述 Spark定义 spark是一种基于内存的快速、通用、可扩展S的大数据分析计算引擎 Spark Core 中提供了Spark最基础核心的功能 Spark SQL是Spark用来操作结构化数据的组件 Spark Streaming是Spark平台上针对实时数据进行流式计算的组件，提供了 阅读全文
posted @ 2021-07-16 23:18 tonggang_bigdata 阅读(706) 评论(0) 推荐(1)