2022年4月9日
spark
摘要： 1.sample算子 sample随机抽样算子，根据传进去的小数按比例进行有放回或者无放回的抽样，虽然参数中有比例，但是不保证按比例进行抽样 2.控制算子checkpoint 阅读全文
posted @ 2022-04-09 22:06 jsqup 阅读(36) 评论(0) 推荐(0)
spark实例1---WordCount
摘要： import org.apache.spark.rdd.RDD import org.apache.spark.{SparkConf, SparkContext} object WordCount extends App { private val conf = new SparkConf() co 阅读全文
posted @ 2022-04-09 21:15 jsqup 阅读(30) 评论(0) 推荐(0)