2019年8月12日
52、Spark Streaming之输入DStream之基础数据源以及基于HDFS的实时wordcount程序
摘要： 一、概述1、Socket：之前的wordcount例子，已经演示过了，StreamingContext.socketTextStream()2、HDFS文件基于HDFS文件的实时计算，其实就是，监控一个HDFS目录，只要其中有新文件出现，就实时处理。相当于处理实时的文件流。streamingContext.fileStream(dataDirectory)streamingContext.file... 阅读全文
posted @ 2019-08-12 11:57 米兰的小铁將 阅读(522) 评论(0) 推荐(0)