8. SparkSQL综合作业

网盘下载sc.txt文件，分别用RDD操作、DataFrame操作和spark.sql执行SQL语句实现以下数据分析

网盘下载sc.txt文件，创建RDD，并转换得到DataFrame

 

 

 

 

 

 

一、DataFrame操作

1.总共有多少学生？

 

 

2.总共开设了多少门课程？

 

 

3.每个学生选修了多少门课？

 

 

4.每门课程有多少个学生选？

 

 

5.每门课程>95分的学生人数

 

 

6.课程'Python'有多少个100分？

 

 

7.Tom选修了几门课？每门课多少分？

 

 

8.Tom的成绩按分数大小排序。

 

 

9.Tom选修了哪几门课？

 

 

10.Tom的平均分

 

 

11.'OperatingSystem'不及格人数

 

 

12.'OperatingSystem'平均分

 

 

13.'OperatingSystem'90分以上人数

 

 

14.'OperatingSystem'前3名

 

 

15.每个分数按比例+20平时分。

 

 

16.求每门课的平均分

 

 

 

二、spark.sql操作

1.总共有多少学生？

 

 

 

2.总共开设了多少门课程？

 

 

3.每个学生选修了多少门课？

 

 

4.每门课程有多少个学生选？

 

 

5.每门课程>95分的学生人数

 

 

6.课程'Python'有多少个100分？

 

 

7.Tom选修了几门课？每门课多少分？

 

 

8.Tom的成绩按分数大小排序。

 

 

9.Tom选修了哪几门课？

 

 

10.Tom的平均分

 

 

11.'OperatingSystem'不及格人数

 

 

12.'OperatingSystem'平均分

 

 

13.'OperatingSystem'90分以上人数

 

 

14.'OperatingSystem'前3名

 

 

15.每个分数按比例+20平时分。

 

 

16.求每门课的平均分