06 2016 档案
Spark Streaming源码解读之Receiver在Driver的精妙实现全生命周期彻底研究和思考
摘要:一:Receiver启动的方式设想 1. Spark Streaming通过Receiver持续不断的从外部数据源接收数据,并把数据汇报给Driver端,由此每个Batch Durations就可以根据汇报的数据生成不同的Job。 2. Receiver属于Spark Streaming应用程序启动 阅读全文
posted @ 2016-06-30 22:34 HaiziS