2019年11月5日
repartition导致的广播失败，关于错误Failed to get broadcast_544_piece0 of broadcast_544
摘要： 今天一个生产环境任务出现了性能问题，，经过仔细检查发现是在一个join操作时，原设定广播右表数据广播失败，导致后续步骤进行缓慢，，报错信息 java.io.IOException: org.apache.spark.SparkException：Failed to get broadcast_544 阅读全文
posted @ 2019-11-05 11:17 梦里繁花 阅读(1533) 评论(0) 推荐(0) 编辑