文件方式实现完整的英文词频统计实例

可以下载一长篇的英文小说,进行词频的分析。

1.读入待分析的字符串

2.分解提取单词 

3.计数字典

4.排除语法型词汇

5.排序

6.输出TOP(20)

7.对输出结果的简要说明。

fo=open('D:\\yaa.txt','r')#读取文件内容
a=fo.read()
fo.close()
a = a.lower()   #字符串处理
for i in ',.':
    a=a.replace(i,' ')
    words=a.split(' ')#单词的列表
exp={'the','of','is','i','you',''}
dic={}
keys=set(words)-exp     #键的集合
for j in keys:
    dic[j]=words.count(j)    #单词计数字典

d=list(dic.items())       #单词计数元组的列表
d.sort(key=lambda b:b[1],reverse=True) #列表排序
for i in range(20): #输出前20元组
    print(d[i])

 

posted @ 2017-09-27 21:05  103许雅婷  阅读(125)  评论(0)    收藏  举报