05 2022 档案

8.SparkSQL综合作业
摘要：网盘下载sc.txt文件，分别用RDD操作、DataFrame操作和spark.sql执行SQL语句实现以下数据分析网盘下载sc.txt文件，创建RDD，并转换得到DataFrame 一、DataFrame操作 1.总共有多少学生？ 2.总共开设了多少门课程？ 3.每个学生选修了多少门课？ 4.每阅读全文

posted @ 2022-05-24 19:23 ITY21 阅读(26) 评论(0) 推荐(0)
Spark SQL
摘要：1.请分析SparkSQL出现的原因，并简述SparkSQL的起源与发展。因为关系数据库已经很流行，而且关系数据库在大数据时代已经不能满足要求。首先，用户需要从不同数据源执行各种操作，包括结构化、半结构化和非结构化数据。其次，用户需要执行高级分析，比如机器学习和图像处理。在实际大数据应用中，经常需阅读全文

posted @ 2022-05-10 17:19 ITY21 阅读(23) 评论(0) 推荐(0)

公告

导航