2021年12月17日
大数据Spark实时处理--实时流处理1（Spark Streaming API）
摘要： 正式开始：基于spark流处理框架的学习 使用Flume+Kafka+SparkStreaming进行实时日志分析：如何实时地（准实时，每分钟分析一次）收集日志，处理日志，把处理后的记录存入Hive中。 Flume会实时监控写入日志的磁盘，只要有新的日志写入，Flume就会将日志以消息的形式传递给K 阅读全文
posted @ 2021-12-17 10:25 酱汁怪兽 阅读(435) 评论(0) 推荐(0)