2022 年 4月 6 日随笔档案 - 涌ysy

2022年4月6日

摘要： A. 分步骤实现 1. 准备文件读文件创建RDD 1.下载小说或长篇新闻稿 2.上传到hdfs上 2. 准备文件读文件创建RDD 3.分词 4.排除大小写lower()，map() 4.1.标点符号re.split(pattern,str)，flatMap() 去掉无用数据： 4.2.停用词,可网盘阅读全文

posted @ 2022-04-06 10:55 涌ysy 阅读(17) 评论(0) 推荐(0)