20240112打卡——实验 6:Spark Streaming 编程初级实践
做了什么:搭建 Spark Streaming 任务,处理 Kafka 数据流。
学到什么:掌握 DStream,理解窗口操作、checkpoint 机制。
遇到的问题:Kafka 连接 Spark 时 offset 处理问题,数据积压导致延迟。
做了什么:搭建 Spark Streaming 任务,处理 Kafka 数据流。
学到什么:掌握 DStream,理解窗口操作、checkpoint 机制。
遇到的问题:Kafka 连接 Spark 时 offset 处理问题,数据积压导致延迟。
