2023年2月21日
MapReduce框架原理
摘要： 原理一：切片与MapTask并行度决定机制 MapTask之前了解到了，他是在分布式程序在map阶段的一个进程，管理之一个map任务类似于一个master。那么什么是切片？ 说起切片，很明显就是对数据的切分。在之前了解到数据是以block（数据块）的形式传输到集群上的，block是对数据的物理切分。 阅读全文
posted @ 2023-02-21 23:44 几人著眼到青衫 阅读(114) 评论(0) 推荐(0)