摘要:
#Spark学习笔记总汇目录 ##spark学习笔记 ####一、什么是Spark? ####二、Spark的体系结构与安装部署 ####三、执行Spark Demo程序 ####四、Spark运行机制及原理分析 ####五、Spark的算子 ####六、Spark RDD的高级算子 ####七、S 阅读全文
posted @ 2021-02-19 17:26
落花桂
阅读(97)
评论(0)
推荐(0)
摘要:
##一、Spark Streaming基础 ####1、Spark Streaming简介 Spark Streaming是核心Spark API的扩展,可实现可扩展、高吞吐量、可容错的实时数据流处理。数据可以从诸如Kafka,Flume,Kinesis或TCP套接字等众多来源获取,并且可以使用由高 阅读全文
posted @ 2021-02-19 17:17
落花桂
阅读(181)
评论(0)
推荐(0)
摘要:
##一、Spark SQL基础 ####1、Spark SQL简介 Spark SQL是Spark用来处理结构化数据的一个模块,它提供了一个编程抽象叫做DataFrame并且作为分布式SQL查询引擎的作用。 为什么要学习Spark SQL?我们已经学习了Hive,它是将Hive SQL转换成MapR 阅读全文
posted @ 2021-02-19 16:05
落花桂
阅读(319)
评论(0)
推荐(0)

浙公网安备 33010602011771号