会员
周边
众包
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
贴贴贴贴
博客园
首页
新随笔
联系
管理
订阅
2022年4月12日
5.RDD操作综合实例
摘要: 一、词频统计 A. 分步骤实现 1、准备文件 (1)下载小说或长篇新闻稿 (2)上传到hdfs上 2、读文件创建RDD 3、分词 4、排除大小写lower(),map() 标点符号re.split(pattern,str),flatMap(), 停用词,可网盘下载stopwords.txt,filt
阅读全文
posted @ 2022-04-12 09:43 贴贴贴贴
阅读(23)
评论(0)
推荐(0)
公告
<
2025年6月
>
日
一
二
三
四
五
六
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
1
2
3
4
5
6
7
8
9
10
11
12
点击右上角即可分享