摘要: 本文是阅读 LinkedIn 公司2020年发表的论文 Magnet: Push-based Shuffle Service for Large-scale Data Processing 一点笔记。 什么是Shuffle 以上图为例,在一个DAG的执行图中,节点与节点之间的数据交换就是Shuffl 阅读全文
posted @ 2022-10-21 13:42 Aitozi 阅读(408) 评论(0) 推荐(0) 编辑