05 2022 档案

8、spark综合作业
摘要：综合练习 一、DataFrame操作 1.创建RDD,并转换得到DataFrame > 生成表头 fields = [StructField('name',StringType(),True),StructField('course',StringType(),True),StructField(' 阅读全文
posted @ 2022-05-25 11:54 牛蛙点点 阅读(219) 评论(0) 推荐(0)
7、Spark Sql
摘要：1.请分析sparkSQL出现的原因，并简述SparkSQL的起源和发展 1.1 出现的原因 1.关系数据库已经很流行 2.关系数据库在大数据时代已经不能满足要求•首先，用户需要从不同数据源执行各种操作，包括结构化、半结构化和非结构化数据。其次，用户需要执行高级分析，比如机器学习和图像处理•在实际大 阅读全文
posted @ 2022-05-11 15:46 牛蛙点点 阅读(104) 评论(0) 推荐(0)