2.安装Spark与Python练习

一、安装Spark

1.配置文件（配置Spark的classpath）

2.配置环境变量

3.运行Python代码

二、词频统计

运行结果：

源码：

import string #导入字符串模块

hist = {} #创建一个空字典，放词频与单词，无序排列
data = [] #创建一个空列表，放词频与单词，有序：从多到少
f = open('A Modern Slavery by Henry W. Nevinson.txt','r',encoding='UTF-8')
content = f.read()
f.close()
content = content.replace('-',' ') #连字符—用空格代替
words = content.split() #字符串按空格分割--分词
#迭代处理：将字典变列表，存入数据
for i in range(len(words)):
    words[i] = words[i].strip(string.punctuation) #去掉标点符号，去掉首尾
    words[i] = words[i].lower() #统一大小写
    if words[i] in hist: #统计词频与单词
        hist[words[i]] = hist[words[i]] + 1
    else:
        hist[words[i]] = 1

#遍历字典
for key, value in hist.items(): #遍历字典
    temp = [value,key] #变量，变量值
    data.append(temp) #添加数据

data.sort(reverse=True) #排序
print(data);