04 2021 档案

Structured Streaming
摘要：Structured Streaming Load过程 源码 https://blog.csdn.net/u011707542/article/details/82316308 自定义Source Sink https://blog.csdn.net/shirukai/article/details 阅读全文
posted @ 2021-04-28 12:33 一根咸鱼干 阅读(45) 评论(0) 推荐(0)
Spark 分区
摘要：Spark 分区 tag: Spark, Spark Partitioner, Spark Repartition 2021-04-2513:36:44 星期六 version: spark-2.4.5 分区器 自定义key分发的逻辑仅在 RDD 级别适用。 Partitioner 自定义分区器 a 阅读全文
posted @ 2021-04-26 09:29 一根咸鱼干 阅读(122) 评论(0) 推荐(0)
计算Spark StorageMemory Heap内存
摘要：#计算Spark StorageMemory Heap内存 tag: Spark, Spark Memory, Spark Storage Memory 2021-04-23 21:26:25 星期五 version: spark-2.4.5 Executor 进程 org.apache.spark 阅读全文
posted @ 2021-04-23 21:20 一根咸鱼干 阅读(539) 评论(0) 推荐(0)