我的随笔

spark sql中进行sechema合并

HarkLee 2015-05-18 15:32 阅读:1003 评论:0 推荐:0

spark sql中保存数据的几种方式

HarkLee 2015-05-18 14:35 阅读:9038 评论:1 推荐:1

spark sql中将数据保存成parquet,json格式

HarkLee 2015-05-18 14:09 阅读:1534 评论:0 推荐:0

spark streaming的容错：防止数据丢失

HarkLee 2015-05-14 16:11 阅读:879 评论:0 推荐:0

spark优化：spark.serializer修改序列化方式

HarkLee 2015-05-14 14:22 阅读:2431 评论:0 推荐:0

streaming优化：禁用序列化

HarkLee 2015-05-14 12:02 阅读:196 评论:0 推荐:0

streaming优化：spark.default.parallelism调整处理并行度

HarkLee 2015-05-14 11:08 阅读:2785 评论:0 推荐:0

streaming优化：并行接收数据

HarkLee 2015-05-14 11:06 阅读:339 评论:0 推荐:0

streaming优化：spark.streaming.receiver.maxRate

HarkLee 2015-05-14 10:10 阅读:2183 评论:0 推荐:0

spark streaming中使用checkpoint

HarkLee 2015-05-14 09:49 阅读:1746 评论:0 推荐:0