2020年3月14日
Spark编程--Kafka安装与配置 (Kafka版本 kafka_2.11_2.2.1)
摘要： 1.安装scala 2.11.8 2.解压下载包 cd ~/下载 sudo tar -zxf kafka_2.11-0.10.1.0.tgz -C ~/app cd ~/app sudo mv kafka_2.11-0.10.1.0/ ./kafka sudo chown -R hadoop ./k 阅读全文
posted @ 2020-03-14 19:03 中年程序 阅读(1002) 评论(0) 推荐(0)
Spark编程--Spark SQL DataFrame
摘要： DataFrame与RDD的区别 从示例文件people.json中创建DataFrame,保存成csv格式的文件 package com.zwq import org.apache.spark.SparkConf import org.apache.spark.sql.SparkSession; 阅读全文
posted @ 2020-03-14 10:17 中年程序 阅读(205) 评论(0) 推荐(0)