我的随笔

浅析 Spark Shuffle 内存使用

sw_kong 2019-09-22 09:35 阅读:428 评论:0 推荐:0

通过 spark.files 传入spark任务依赖的文件源码分析

sw_kong 2019-09-21 16:34 阅读:2046 评论:0 推荐:0

Spark 2.x Troubleshooting Guide

sw_kong 2019-09-18 07:38 阅读:269 评论:0 推荐:0

Spark 2.x 在作业完成时却花费很长时间结束

sw_kong 2019-09-16 21:01 阅读:745 评论:0 推荐:0

ParquetDecodingException: Can not read value at 0 in block -1 in file hdfs:...

sw_kong 2019-09-04 22:19 阅读:1789 评论:0 推荐:0

[转]Spark SQL2.X 在100TB上的Adaptive execution(自适应执行)实践

sw_kong 2019-09-02 19:04 阅读:293 评论:0 推荐:0

hbase G1 GC优化

sw_kong 2019-09-01 17:13 阅读:869 评论:0 推荐:0

G1 collector 介绍

sw_kong 2019-08-31 09:29 阅读:460 评论:0 推荐:0

hbase性能优化，看这篇就够了

sw_kong 2019-08-26 11:16 阅读:4979 评论:2 推荐:1

Container killed by YARN for exceeding memory limits

sw_kong 2019-08-24 09:45 阅读:6046 评论:4 推荐:5