代码改变世界

Spark Streaming

2016-06-05 21:46  yuejianjun  阅读(70)  评论(0)    收藏  举报

 

kafka --(pull)--> Spark Streaming ---> Spark Core ---> kafka ---> hbase等

 

Spark Streaming框架定时触发Job （比如1秒）

Dstream 作为RDD的class(相当于RDD?)

DStreamGraph 作为RDD的DAG的模板（相当于RDD的DAG?)