2021年1月23日
1.23学习总结：文件流
摘要： 一、程序功能 监听指定目录下文件的变化过程，每10秒输出一次该文件中单词词频统计结果。 二、实现过程 定义一个DStream，创建一个文件流。首先将文件中的单词全部按空格拆分并汇总到一个RDD中，然后将RDD转化为(单词，1）的格式，使用reduceByKey()方法统计词频。以上步骤为DStrea 阅读全文
posted @ 2021-01-23 14:21 Protect_Winter 阅读(58) 评论(0) 推荐(0)