02 2019 档案
摘要:(1)基本类型包括: Byte,Short,Int,Long,Char,String,Float,Double,Boolean。String类型是归于java.long之外,其余类型都是scala的成员。 其中Byte,Short,Int,Long,Char被称为整数类型,整数类型加上Float和D
阅读全文
摘要:a.[--master]:表示要连接的集群管理器 spark://host:port:连接到指定端口的Spark独立集群上。默认情况下Spark 独立主节点使用7077端口 mesos://host:port:连接到指定端口的Mesos 集群上。默认情况下Mesos 主节点监听5050端口 yarn
阅读全文
摘要:一:相关概念的说明 1.application应用: 一个App包含:一个driver(驱动器)、cluster manager(集群管理器)、一个或多个Exector(执行器) spark中的App可以构建多个Job,而Job间的调用遵循{Scheduling Mode: FIFO}先进先出模式;
阅读全文