2021年3月12日
02 Spark架构与运行流程
摘要： 2. Spark已打造出结构一体化、功能多样化的大数据生态系统，请简述Spark生态系统。 Spark拥有DAG执行引擎，支持在内存中对数据进行迭代计算 Spark不仅支持Scala编写应用程序，而且支持Java和Python等语言进行编写，特别是Scala是一种高效、可拓展的语言，能够用简洁的代码 阅读全文
posted @ 2021-03-12 17:25 无可奈何花落 阅读(57) 评论(0) 推荐(0) 编辑
2021年3月2日
01 大数据概述
摘要： 1.用图表描述Hadoop生态系统的各个组件及其关系。 2.阐述Hadoop生态系统中，HDFS, MapReduce, Yarn, Hbase及Spark的相互关系。 HDFS是Hadoop体系中 数据存储管理的基础。它是一个高度容错的系统，能检测和应对硬件故障，用于在低成本的通用硬件上运行。HD 阅读全文
posted @ 2021-03-02 18:46 无可奈何花落 阅读(58) 评论(0) 推荐(0) 编辑