2.安装Spark与Python练习

一、安装Spark

1.检查基础环境hadoop,jdk

 

 

2.下载spark

 

3.解压，文件夹重命名、权限

 

4.配置文件

 

 

 

 5.环境变量

6.启动pyspark

 

 

 

7.试运行Python代码 

 

 

 

二、Python编程练习：英文文本的词频统计

1.准备文本文件

 

 

2.统计每个单词出现的次数