SparkSQL综合作业
准备: 创建RDD,并转换为DataFrame;scm持久化;创建spark.sql临时表等预处理:
1.总共有多少学生?
RDD
DataFrame
spark.sql
2.开设了多少门课程?
RDD
DataFrame
spark.sql
3.每个学生选修了多少门课?
RDD
DataFrame
spark.sql
4.每门课程有多少个学生选?
RDD
DataFrame
spark.sql
5.每门课程>95分的学生人数
RDD
DataFrame
spark.sql
6.课程'Python'有多少个100分?
RDD
DataFrame
spark.sql
7.Tom选修了几门课?每门课多少分?
RDD
DataFrame
spark.sql
8.Tom的成绩按分数大小排序。
RDD
DataFrame
spark.sql
9.Tom选修了哪几门课?
RDD
DataFrame
spark.sql
10.Tom的平均分。
RDD
DataFrame
spark.sql
11.'OperatingSystem'不及格人数
RDD
DataFrame
spark.sql
12.'OperatingSystem'平均分
RDD
DataFrame
spark.sql
13.'OperatingSystem'90分以上人数
RDD
DataFrame
spark.sql
14.'OperatingSystem'前3名
RDD
DataFrame
spark.sql
15.每个分数按比例+20平时分。
RDD
DataFrame
spark.sql
16.求每门课的平均分
RDD
DataFrame
spark.sql
17.选修了7门课的有多少个学生?
RDD
DataFrame
spark.sql
18.每门课的选修人数、平均分、不及格人数、通过率
RDD
DataFrame
spark.sql
19.优秀、良好、通过和不合格各有多少人?
20.同时选修了DataStructure和 DataBase 的学生
21.选修了DataStructure 但没有选修 DataBase 的学生
22.选修课程数少于3门的同学
23.选修6门及以上课程数的同学
24.查询平均成绩大于等于60分的姓名和平均成绩
25.找出平均分最高的10位同学