2020年9月14日
spark 操作redis
摘要： 依赖库 spark 操作redis的时候，依赖的库是spark-redis 首先我们导入依赖 <!-- https://mvnrepository.com/artifact/com.redislabs/spark-redis --> <dependency> <groupId>com.redisla 阅读全文
posted @ 2020-09-14 17:23 JunCode 阅读(6310) 评论(4) 推荐(0)
spark dataframe 转换为json
摘要： 调用spark 的隐式转换 scala> import spark.implicits._ import spark.implicits._ scala> val df=sc.parallelize(Array(("a",1),("b",2),("c",3))) scala> df.show() + 阅读全文
posted @ 2020-09-14 16:37 JunCode 阅读(1436) 评论(0) 推荐(0)