2018年5月11日

摘要: 整个shuffle的流程图 Paste_Image.png Map Shuffle的作用以及相应的设置 partition 过程:输入的<key,value>对经过map()处理后输出新的<key,value>对,它首先会被存储到环形缓冲区中(字节数组实现)。该环形缓冲区的大小默认为100MB。并且 阅读全文
posted @ 2018-05-11 10:59 层林尽染 阅读(1493) 评论(0) 推荐(0)

导航