zourui4271

博客园 首页 新随笔 联系 订阅 管理

2019年2月14日 #

摘要: https://blog.csdn.net/yu0_zhang0/article/details/81776459 https://blog.csdn.net/lxpbs8851/article/details/9814007 https://blog.csdn.net/young_0609/art 阅读全文
posted @ 2019-02-14 15:12 zourui4271 阅读(189) 评论(0) 推荐(0)

摘要: 数据倾斜解决方案 数据倾斜的解决,跟之前讲解的性能调优,有一点异曲同工之妙。 性能调优中最有效最直接最简单的方式就是加资源加并行度,并注意RDD架构(复用同一个RDD,加上cache缓存)。相对于前面,shuffle、jvm等是次要的。 6.1、原理以及现象分析 6.1.1、数据倾斜怎么出现的 在执 阅读全文
posted @ 2019-02-14 14:00 zourui4271 阅读(390) 评论(0) 推荐(0)