05 2021 档案

09 spark连接mysql数据库
摘要：1.安装启动检查Mysql服务。netstat -tunlp (3306) 2.spark 连接mysql驱动程序。–cp /usr/local/hive/lib/mysql-connector-java-5.1.40-bin.jar /usr/local/spark/jars 3.启动 Mysql 阅读全文
posted @ 2021-05-30 22:03 不喜欢穿内裤 阅读(35) 评论(0) 推荐(0)
08 学生课程分数的Spark SQL分析
摘要：1.生成“表头” from pyspark.sql.types import IntegerType,StringType,StructField,StructTypefrom pyspark.sql import Rowfields=[StructField('name',StringType() 阅读全文
posted @ 2021-05-19 22:15 不喜欢穿内裤 阅读(116) 评论(0) 推荐(0)