私人小院

摘要： 1 阅读全文

摘要： https://blog.csdn.net/fencerain/article/details/87935114/ 阅读全文

摘要： 1. 什么是 Json 序列化 和 反序列化 序列化 => 将 Java对象 转换成 json字符串反序列化 => 将 json字符串 转换成 Java对象 2. 依赖包 说明 <dependency> <groupId>com.fasterxml.jackson.core</groupId> <a 阅读全文

摘要： 1. 什么是 DStream ？ 1. A Discretized Stream(一个离散化流) 2. Spark Streaming 中基本抽象 表示: 一系列 连续的 RDD 每个RDD包含 一段时间间隔(采集周期) 内的数据 3. 是一个抽象类,定义了 几个重要的属性 def slideDur 阅读全文

摘要： 1. TCP Source import org.apache.spark.SparkConf import org.apache.spark.streaming.dstream.ReceiverInputDStream import org.apache.spark.streaming.{Seco 阅读全文

摘要： 1. Spark Streaming 是什么 ？ Spark Streaming 是 Spark Core 的扩展API 用来支持 高吞吐、高容错的 处理 流式数据 数据源可以是 : Kafka、TCP sockets、Flume、Twitter等流式数据源 处理数据: 可以用 Spark Core 阅读全文

摘要： 1. 直接 继承 object GetCustomHandler extends ResultSetHandler[Int] { override def handle(rs: ResultSet): Int = { var cnt = 0 while (rs.next()) { cnt += 1 阅读全文

摘要： https://www.jianshu.com/p/a1351fd66964 阅读全文

摘要： 1. mutable.Queue API object ScalaQueue extends App { //创建 mutable 队列 var queue: mutable.Queue[String] = mutable.Queue[String]() //入队-添加 单个或 多个元素 priva 阅读全文

摘要： 1. 什么是 Option(选项) 是Scala 提供的一种数据类型 用来封装一个数据 Option(var) 当var有值时 就返回 Some(var) 当var为空时 就返回 None 2. Option API object OptionApi extends App { //TODO 初始化 阅读全文