2018年11月23日
Spark Streaming 交互 Kafka的两种方式
摘要： 一、Spark Streaming连Kafka（重点） 方式一：Receiver方式连：走磁盘 使用High Level API（高阶API）实现Offset自动管理，灵活性差，处理数据时，如果某一时刻数据量过大就会磁盘溢写，通过WALS（Write Ahead Logs）进行磁盘写入,0.10版本 阅读全文
posted @ 2018-11-23 10:21 阿文awen 阅读(238) 评论(0) 推荐(0)