2019年7月17日
Spark SQL之Catalog API介绍和使用
摘要： Catalog API 访问Catalog Catalog可以通过SparkSession获取，下面代码展示如何获取Catalog： Querying the databases 我们一旦创建好catalog对象之后，我们可以使用它来查询元数据中的数据库，catalog上的API返回的结果全部都是d 阅读全文
posted @ 2019-07-17 16:27 任重而道远的小蜗牛 阅读(1502) 评论(0) 推荐(0)
sparksql的自定义函数
摘要： 自定义函数 运行结果 + + + +|name| like |num|+ + + +|17er |ruoze,j哥,星星,小海| 4|| 老二| zwr,17er | 2 || 小海| 苍老师,波老师 | 2 |+ + + + 定义了每个人喜欢的人的个数的函数；以上的是定义函数以后通过sql来使用的 阅读全文
posted @ 2019-07-17 11:06 任重而道远的小蜗牛 阅读(2799) 评论(0) 推荐(0)