2019年3月20日
shuffler 文件寻址与内存管理
摘要： shuffle 组件MapOutputTracker 磁盘管理小文件 1,主 MapOutputTrackerMaster(存在于Driver) 2,从 MapOutputTrackerWorker(存在于Executor)BlockManager 块管理者 1,BlockManagerMaster(存在于Driver) 1),DiskStore 管理磁盘数据 ... 阅读全文
posted @ 2019-03-20 23:24 十七楼的羊 阅读(188) 评论(0) 推荐(0)