菜鸟的博客

纵有疾风起,人生不言弃。

导航

2025年1月20日 #

Spark复习

摘要: # Spark ## 1.1 ***用于大规模数据处理的统一分析引擎*** **Spark的架构角色**: *资源管理层面:* Master:集群资源管理 Worker:单机资源管理 *任务运行层面:* Driver:单个任务的管理 Executor:单个任务的计算 Spark解决的问题: 海量的数 阅读全文

posted @ 2025-01-20 12:51 hhmzd233 阅读(8) 评论(0) 推荐(0)