05 2022 档案

8. SparkSQL综合作业
摘要：综合练习：学生课程分数网盘下载sc.txt文件，分别创建RDD、DataFrame和临时表/视图； # 创建RDD # 转换得到DataFrame # 观察 df # 注册为临时表观察临时表分别用RDD操作、DataFrame操作和spark.sql执行SQL语句实现以下数据分析: 1.总共有阅读全文

posted @ 2022-05-27 21:51 Luirc 阅读(108) 评论(0) 推荐(0)
7.Spark SQL
摘要：1.分析SparkSQL出现的原因，并简述SparkSQL的起源与发展。 SparkSQL出现的原因 hive是shark的前身，shark是sparkSQL的前身，sparkSQL产生的根本原因是其完全脱离了hive的限制，hive是hive SQL转换成MapReduce然后提交到集群上执行，大阅读全文

posted @ 2022-05-11 17:35 Luirc 阅读(38) 评论(0) 推荐(0)

公告

导航