zourui4271

摘要： 最近几次被问到关于数据倾斜的问题，这里找了些资料也结合一些自己的理解. 在并行计算中我们总希望分配的每一个task 都能以差不多的粒度来切分并且完成时间相差不大，但是集群中可能硬件不同，应用的类型不同和切分的数据大小不一致总会导致有部分任务极大的拖慢了整个任务的完成时间，硬件不同就不说了，应用的类型... 阅读全文

摘要： 1.you are unfamiliar with the subject area.2.you can read / understand the most fundamental aspects of the subject area.3.ability to implement small c... 阅读全文