Spark

• 基础架构

• sql在spark中的流转流程

• spark 内存使用与优化

• 使用场景

• 优缺点

• 核心技术

 

就系统架构而言，Spark采用“主从架构”，包含一个Master（即Driver）和若干个Worker

1---

 

2---

 

 

3---

 

4---

 

5---

 

 

参考文章：

https://zhuanlan.zhihu.com/p/67061627