会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
volibearGeek
博客园
首页
新随笔
联系
订阅
管理
2018年7月20日
Spark Streaming 读取 Kafka 数据的两种方式
摘要: receiver: 使用kafka的高级api consumerAPI,自动更新offset到zookeeper; 在executor上会有receiver从kafka接收数据并存储在Spark executor中,在到了batch时间后触发job去处理接收到的数据,1个receiver占用1个co
阅读全文
posted @ 2018-07-20 09:12 volibearGeek
阅读(2940)
评论(0)
推荐(0)
公告