01 2019 档案

spark 分组取topn
摘要：java scala 阅读全文
posted @ 2019-01-19 16:16 tele 阅读(1861) 评论(0) 推荐(0)
spark 基于key排序的wordcount
摘要：java scala 阅读全文
posted @ 2019-01-17 14:33 tele 阅读(264) 评论(0) 推荐(0)
spark accumulator累加器
摘要：java scala 阅读全文
posted @ 2019-01-16 20:32 tele 阅读(458) 评论(0) 推荐(0)
spark rdd持久化的简单对比
摘要：未使用rdd持久化 使用后 通过对比可以发现,未使用RDD持久化时,第一次计算比使用RDD持久化要快,但之后的计算显然要慢的多,差不多10倍的样子 代码 阅读全文
posted @ 2019-01-15 20:27 tele 阅读(311) 评论(0) 推荐(0)
spark action之saveastextfile
摘要：java scala 阅读全文
posted @ 2019-01-14 21:18 tele 阅读(2707) 评论(0) 推荐(0)
spark action之countbykey
摘要：java scala 阅读全文
posted @ 2019-01-14 21:16 tele 阅读(537) 评论(0) 推荐(0)
spark cogroup算子
摘要：java scala 阅读全文
posted @ 2019-01-14 19:23 tele 阅读(1179) 评论(0) 推荐(0)
spark join算子
摘要：java scala 阅读全文
posted @ 2019-01-14 18:37 tele 阅读(2940) 评论(0) 推荐(0)