2021年7月2日
sparkStreaming
摘要： import org.apache.spark.SparkConfimport org.apache.spark.streaming.{Seconds, StreamingContext}// 创建一个本地模式的StreamingContext, 两个工作线程， 1s的批处理间隔//Master要求 阅读全文
posted @ 2021-07-02 12:29 tevien 阅读(41) 评论(0) 推荐(0)
Spark分析sogou日志， RDD
摘要： import com.hankcs.hanlp.HanLPimport org.apache.spark.rdd.RDDimport org.apache.spark.{SparkConf, SparkContext}import scala.collection.immutable.StringO 阅读全文
posted @ 2021-07-02 12:27 tevien 阅读(90) 评论(0) 推荐(0)