我的随笔

Spark2.0 shuffle service

大葱拌豆腐 2018-06-14 21:47 阅读:1782 评论:0 推荐:0

Spark Shuffle调优原理和最佳实践

大葱拌豆腐 2018-06-14 21:28 阅读:693 评论:0 推荐:0

Yarn框架和工作流程研究

大葱拌豆腐 2018-06-14 18:12 阅读:4858 评论:1 推荐:2

Hadoop MapReduce Task的进程模型与Spark Task的线程模型

大葱拌豆腐 2018-06-14 17:20 阅读:2072 评论:0 推荐:0

Spark checkpoint机制简述

大葱拌豆腐 2018-06-14 16:50 阅读:1557 评论:0 推荐:0

HDFS的运行原理

大葱拌豆腐 2018-06-14 14:49 阅读:225 评论:0 推荐:0

HDFS的工作流程分析

大葱拌豆腐 2018-06-14 14:42 阅读:409 评论:0 推荐:0

DataFrames与RDDs的相互转换

大葱拌豆腐 2018-06-13 21:06 阅读:396 评论:0 推荐:0

java.lang.UnsatisfiedLinkError: org.apache.hadoop.util.NativeCrc32.nativeComputeChunkedSumsByteArray(II[BI[BIILjava/lang/String;JZ)V

大葱拌豆腐 2018-06-13 09:25 阅读:5387 评论:1 推荐:0

Spark中RDD转换成DataFrame的两种方式（分别用Java和Scala实现）

大葱拌豆腐 2018-06-12 14:20 阅读:4028 评论:0 推荐:0