摘要：
package com.shujia.spark.sql import org.apache.spark.sql._ import org.apache.spark.sql.expressions.Window object Demo3DataFrameApi { def main(args: Ar 阅读全文
posted @ 2021-07-21 16:51
坤坤无敌
阅读(107)
评论(0)
推荐(0)
摘要：
package com.shujia.spark.sql import org.apache.spark.sql.{DataFrame, SaveMode, SparkSession} object Demo2DataSource { def main(args: Array[String]): U 阅读全文
posted @ 2021-07-21 16:50
坤坤无敌
阅读(326)
评论(0)
推荐(0)
摘要：
package com.shujia.spark.sql import org.apache.spark.sql.{DataFrame, SaveMode, SparkSession} object Demo1SparkSession { def main(args: Array[String]): 阅读全文
posted @ 2021-07-21 16:49
坤坤无敌
阅读(123)
评论(0)
推荐(0)
摘要：
Accumulate package com.shujia.spark.core import java.lang import org.apache.spark.{SparkConf, SparkContext} import org.apache.spark.rdd.RDD import org 阅读全文
posted @ 2021-07-19 23:06
坤坤无敌
阅读(50)
评论(0)
推荐(0)
摘要：
1、HBase存储结构 2、RowKey设计原则 1）rowkey长度原则 2）rowkey散列原则 3）rowkey唯一原则 3、RowKey如何设计 1）生成随机数、hash、散列值 2）字符串反转 4、Phoenix二级索引（讲原理） 对于Hbase，如果想精确定位到某行记录，唯一的办法就是通 阅读全文
posted @ 2021-07-18 22:44
坤坤无敌
阅读(53)
评论(0)
推荐(0)
摘要：
package com.shujia.spark.core import org.apache.spark.rdd.RDD import org.apache.spark.{SparkConf, SparkContext} object Demo19PageRank { def main(args: 阅读全文
posted @ 2021-07-18 11:33
坤坤无敌
阅读(325)
评论(0)
推荐(0)
摘要：
package com.shujia.spark.core import org.apache.spark.rdd.RDD import org.apache.spark.{SparkConf, SparkContext} import scala.util.Random object Demo18 阅读全文
posted @ 2021-07-18 11:20
坤坤无敌
阅读(395)
评论(0)
推荐(0)
摘要：
package com.shujia.spark.core import org.apache.spark.rdd.RDD import org.apache.spark.{SparkConf, SparkContext} object Demo17Student { def main(args: 阅读全文
posted @ 2021-07-18 11:17
坤坤无敌
阅读(98)
评论(0)
推荐(0)
摘要：
package com.shujia.spark.core import org.apache.spark.{SparkConf, SparkContext} import org.apache.spark.rdd.RDD object Demo16CheckPoint { def main(arg 阅读全文
posted @ 2021-07-18 11:16
坤坤无敌
阅读(234)
评论(0)
推荐(0)
摘要：
package com.shujia.spark.core import org.apache.spark.rdd.RDD import org.apache.spark.storage.StorageLevel import org.apache.spark.{SparkConf, SparkCo 阅读全文
posted @ 2021-07-18 11:15
坤坤无敌
阅读(68)
评论(0)
推荐(0)
浙公网安备 33010602011771号