摘要: 1.简单的说https://zhuanlan.zhihu.com/p/36253130 shuffle就包括 从map执行后写入数据到内存的环形缓冲区开始,然后分区、排序、合并、combine规约(可选) 从reduce开始后,copy、排序 Map端流程: 环形内存缓存区:每个split数据交由一 阅读全文
posted @ 2022-03-02 23:41 功不唐捐-纯小喜 阅读(148) 评论(0) 推荐(0)
摘要: 可以先查看其它博主 https://blog.csdn.net/weixin_44318830/article/details/103061572 这是另一个博主的 https://blog.csdn.net/weixin_52346300/article/details/116021803?utm 阅读全文
posted @ 2022-03-02 22:04 功不唐捐-纯小喜 阅读(73) 评论(0) 推荐(0)