随笔档案「2020年2月」 - upupfeng

Spark中Task数量的分析

摘要：本文主要说一下Spark中Task相关概念、RDD计算时Task的数量、Spark Streaming计算时Task的数量。阅读全文

posted @ 2020-02-29 20:44 upupfeng 阅读(9901) 评论(1) 推荐(2)

Spark存储介绍

摘要：记录一下Spark的存储相关内容阅读全文

posted @ 2020-02-27 17:01 upupfeng 阅读(1188) 评论(0) 推荐(0)

摘要：本文梳理一下Spark作业执行的流程。阅读全文

posted @ 2020-02-23 13:47 upupfeng 阅读(1716) 评论(0) 推荐(0)

摘要：本文介绍一下rdd的基本属性概念、rdd的转换/行动操作、rdd的宽/窄依赖。阅读全文

posted @ 2020-02-22 12:48 upupfeng 阅读(2272) 评论(0) 推荐(0)

摘要：Spark Streaming运行流程源码解析阅读全文

posted @ 2020-02-18 10:52 upupfeng 阅读(804) 评论(0) 推荐(0)

摘要：Spark Streaming运行流程源码解析阅读全文

posted @ 2020-02-18 10:50 upupfeng 阅读(1311) 评论(0) 推荐(1)

upupfeng