百里登风

导航

2017年9月5日

Spark Streaming 例子

摘要： 下在集群跑一下 监听1212端口(端口可以自己随便取) 可以看到反馈信息 阅读全文

posted @ 2017-09-05 23:41 百里登峰 阅读(401) 评论(0) 推荐(0)

spark streaming 概述

摘要： 批处理 & 流处理 像这个是批处理 像这样就是流处理 为什么需要流处理--更多场景需要 Spark Core & RDD 本质上是离线运算 Spark Streaming是什么（分布式的流处理系统） Spark Streaming是什么 Spark Streaming的竞争对手（两都是apache的 阅读全文

posted @ 2017-09-05 12:03 百里登峰 阅读(139) 评论(0) 推荐(0)

spark sql 的性能调优

摘要： Caching Data in Memory 其他调优参数 阅读全文

posted @ 2017-09-05 09:44 百里登峰 阅读(213) 评论(0) 推荐(0)