2023年8月11日
spark社区bug
摘要： 1.SPARK-26114（已合）repartitionAndSortWithinPartitions 后合并时 PartitionedPairBuffer 的内存泄漏 原因 这个Spark源码的issue描述了在使用coalesce操作合并分区时可能会导致PartitionedPairBuffer 阅读全文
posted @ 2023-08-11 14:42 平平淡淡以明志 阅读(40) 评论(0) 推荐(0) 编辑