2021年3月12日
Spark架构与运行流程
摘要： 1. 为什么要引入Yarn和Spark 答：普通OS（操作系统）的功能主要是为处理器管理、存储器管理、设备管理、文件管理、作业管理和用户接口。 在集群环境下，HDFS已经负责了文件管理，而设备概念较弱，故YARN主要负责统一管理集群内服务器的计算资源（主要包括CPU和内存资源）、作业调度和用户接口。 阅读全文
posted @ 2021-03-12 17:29 201806120 阅读(60) 评论(0) 推荐(0)