上一页 1 ··· 20 21 22 23 24 25 26 27 28 ··· 59 下一页
摘要: 原因 jdk版本选低了 解决 将以下几处jdk版本修改为1.8 Project Structure(File->Project Structure...)>Sources>Languate level Settings>Java Compiler Settings>Maven Runner >JRE 阅读全文
posted @ 2020-06-17 00:18 cxc1357 阅读(110) 评论(0) 推荐(0)
摘要: 原因 maven打包默认采用jdk 1.5,无法识别<> 解决 在pom.xml中加入: <properties> <maven.compiler.source>1.8</maven.compiler.source> <maven.compiler.target>1.8</maven.compile 阅读全文
posted @ 2020-06-17 00:15 cxc1357 阅读(102) 评论(0) 推荐(0)
摘要: 概述 流式计算框架,类似Storm 严格来说不是真正的流式计算(实时计算),而是把连续的数据当做不连续的RDD处理,本质是离散计算 Flink:和 Spark Streaming 相反,把离散数据当成流式数据处理 基础 易用,已经集成在Spark中 容错性,底层也是RDD 支持Java、Scala、 阅读全文
posted @ 2020-06-14 23:48 cxc1357 阅读(263) 评论(0) 推荐(0)
摘要: 概述 基于Spark,兼容Hive 集成在Spark中,不需单独安装 提供统一的数据访问方式 结构化的数据类型:JDBC、JSON、Hive、Parquet(Saprk SQL 默认数据源) 支持标准的数据连接:JDBC、ODBC Hive把sql解析成了mapreduce程序,sparksql把s 阅读全文
posted @ 2020-06-13 17:24 cxc1357 阅读(161) 评论(0) 推荐(0)
摘要: 创建型:在创建对象的同时隐藏创建逻辑 工厂 目的:生成跨平台对话框 结构:工厂类 [ ( 实体接口 ) 获取对象 ],实体接口 ( 抽象方法 ),实体类( 具体方法 ) 中间层:将创建过程抽象为工厂类 接口化:将对话框动作抽象为接口 对象化:将具体平台对话框抽象为对象 构建器 目的:生成肯德基套餐 阅读全文
posted @ 2020-06-12 22:51 cxc1357 阅读(182) 评论(0) 推荐(0)
摘要: 高级算子 mapPartitionWithIndex:对RDD中每个分区(有下标)进行操作,通过自己定义的一个函数来处理 def mapPartitionsWithIndex[U](f: (Int, Iterator[T]) ⇒ Iterator[U]) f 是函数参数,接收两个参数 Int:分区号 阅读全文
posted @ 2020-06-11 23:14 cxc1357 阅读(124) 评论(0) 推荐(0)
摘要: 参考 https://www.cnblogs.com/sank/p/10046277.html 阅读全文
posted @ 2020-06-11 22:19 cxc1357 阅读(93) 评论(0) 推荐(0)
摘要: 一个目标:管理变化,提高复用 两种手段:分解,抽象 八大原则 所有模式UML图的类名改为A, B ...,方法名改为F1(), F2()... 三种模型 继承和组合对象的内存模型一样 组合对象缺乏变化,组合指针具备灵活性 设计模式中多用组合指针(指针指向多态对象,表达灵活性,可用B1, B2...等 阅读全文
posted @ 2020-06-11 08:37 cxc1357 阅读(165) 评论(0) 推荐(0)
摘要: 概述 属于行为型模式 将算法与其作用的对象隔离开 动机:由于需求的变化,某些类层次结构中常常需要增加新的行为(方法),如果直接在基类中做这样的更改,将会给子类带来很繁重的负担,甚至破坏原有设计 如何在不更改类层次结构的前提下,在运行时根据需要透明地为类层次结构上的各个类动态添加新的操作,从而避免上述 阅读全文
posted @ 2020-06-11 00:04 cxc1357 阅读(165) 评论(0) 推荐(0)
摘要: 概述 属于行为型模式 对象需要根据自身当前的状态进行不同行为,状态数量多且状态相关的代码频繁变更 在一个对象的内部状态变化时改变其行为,使其看上去就像改变了自身所属的类一样 组件构建过程中,某些对象的状态经常面临变化,如何对这些变化进行有效的管理?同时又维持高层模块的稳定?“状态变化”模式为这一问题 阅读全文
posted @ 2020-06-10 21:00 cxc1357 阅读(199) 评论(0) 推荐(0)
上一页 1 ··· 20 21 22 23 24 25 26 27 28 ··· 59 下一页