2021年2月3日
Spark-Shell编程
摘要： Spark-Shell编程 进入Spark-shell模式 bin/spark-shell --master local[6] #本地运行 WordCount案例 读取文件 val rdd1=sc.textFile("file:///export/wordcount.txt") #读取本地文件 va 阅读全文
posted @ 2021-02-03 18:57 公鸡不下蛋 阅读(206) 评论(0) 推荐(0)
Spark环境配置
摘要： Spark环境配置 spark-env.sh #JAVA_HOME export JAVA_HOME=/export/servers/jdk1.8.0_271 #Spark Master Address #export SPARK_MASTER_HOME=node01 export SPARK_MA 阅读全文
posted @ 2021-02-03 17:02 公鸡不下蛋 阅读(168) 评论(0) 推荐(0)