2021年8月31日
MapReduce框架原理
摘要： InputFormat数据输入 切片与MapTask并行度决定机制 1）问题引出 MapTask的并行度决定Map阶段的任务处理并发度，进而影响到整个Job的处理速度。 思考：1G的数据，启动8个MapTask，可以提高集群的并发处理能力。那么1K的数据，也启动8个MapTask，会提高集群性能吗？ 阅读全文
posted @ 2021-08-31 14:10 好吗，好 阅读(74) 评论(0) 推荐(0)