摘要: 最近阅读目标检测论文,看到一位博主对论文总结不错,通俗易懂,特转载 ————————————————版权声明:本文为CSDN博主「Yemiekai」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。原文链接:https://blog.csdn.net/Yemiekai 阅读全文
posted @ 2021-11-17 17:32 Chen洋 阅读(1620) 评论(0) 推荐(0)
摘要: 一、先看结论1.从Shuffle的角度 reduceByKey 和 groupByKey都存在shuffle操作,但是reduceByKey可以在shuffle之前对分区内相同key的数据集进行预聚合(combine)功能,这样会较少落盘的数据量,而groupByKey只是进行分组,不存在数据量减少 阅读全文
posted @ 2021-11-17 16:57 Chen洋 阅读(1666) 评论(0) 推荐(0)