2.安装Spark与Python练习

一、安装Spark

1.检查基础环境hadoop,jdk

 

 2. 配置文件、环境变量

#配置文件
vim /usr/local/spark/conf/spark-env.sh

 

 3.环境变量

 

 4.试运行Python代码

 

 

 

 

二、Python编程练习:英文文本的词频统计

    1. 准备文本文件 

       

       

 

  1. 统计每个单词出现的次数
  2. 结果写文件 

     

     

 

posted on 2022-03-07 11:08  yyyy/\  阅读(20)  评论(0编辑  收藏  举报