2021年10月15日
Yarn调度已经切片机制的继续学习
摘要： 切片机制 1）简单地按照文件的内容长度进行切片 2）切片大小，默认等于Block大小 3）切片时不考虑数据集整体，而是逐个针对每一个文件单独切片 提示：切片大小公式：max(0,min(Long_max,blockSize)) 1）Hadoop调度器重要分为三类： FIFO 、Capacity Sc 阅读全文
posted @ 2021-10-15 20:30 好吗，好 阅读(88) 评论(0) 推荐(0)