2019年6月20日

摘要: 作业来源:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3363 Hadoop综合大作业 1.将爬虫大作业产生的csv文件 2.对CSV文件进行预处理生成无标题文本文件 3.把上传到hdfs中的文本文件最终导入到数据仓库Hive中 4 阅读全文
posted @ 2019-06-20 21:54 LaxY0013 阅读(172) 评论(0) 推荐(0) 编辑

2019年6月3日

摘要: 本次作业要求来源于:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3310 一.目录操作 1. 在HDFS中为hadoop用户创建一个用户目录(hadoop用户) 在用户目下创建一个input目录,在HDFS的根目录下创建一个名称为i 阅读全文
posted @ 2019-06-03 22:49 LaxY0013 阅读(452) 评论(0) 推荐(0) 编辑

2019年5月16日

摘要: 安装Hadoop 作业要求来源于:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3223 一. 安装Linux,MySql 1. 安装Oracle VM VirtualBox虚拟机,创建并配置Ubuntu(64 bit) ,安装配置参 阅读全文
posted @ 2019-05-16 21:06 LaxY0013 阅读(123) 评论(0) 推荐(0) 编辑

2019年5月9日

摘要: 作业要求来自https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3159 作业要求来自https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3159 作业要求来自https://ed 阅读全文
posted @ 2019-05-09 02:34 LaxY0013 阅读(179) 评论(0) 推荐(0) 编辑

2019年4月15日

摘要: 这个作业的要求来自于:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/2941。 0.从新闻url获取点击次数,并整理成函数 newsUrl newsId(re.search()) clickUrl(str.format()) requ 阅读全文
posted @ 2019-04-15 11:07 LaxY0013 阅读(107) 评论(0) 推荐(0) 编辑

2019年4月1日

摘要: 作业要求源于:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2881 1. 简单说明爬虫原理 请求网站并提取数据的自动化程序。 2. 理解爬虫开发过程 1:向服务器发起请求 通过HTTP库向目标站点发起请求,即发送一个Request, 阅读全文
posted @ 2019-04-01 10:30 LaxY0013 阅读(138) 评论(0) 推荐(0) 编辑

2019年3月25日

摘要: 这次作业来源于:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2822 一、中文词频统计 1. 下载一长篇中文小说。 2. 从文件读取待分析文本。 3. 安装并使用jieba进行中文分词。 pip install jieba impo 阅读全文
posted @ 2019-03-25 01:55 LaxY0013 阅读(342) 评论(0) 推荐(0) 编辑

2019年3月24日

摘要: 作业来源:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2753 1.列表,元组,字典,集合分别如何增删改查及遍历。 效果图: 2.元组 增:无 删:无 改:无 查: 3.字典增删改查 效果图 4.集合增删改查 效果图: 总结:1.  阅读全文
posted @ 2019-03-24 15:09 LaxY0013 阅读(175) 评论(0) 推荐(0) 编辑

2019年3月11日

摘要: 1.字符串操作: 解析身份证号:生日、性别、出生地等。 凯撒密码编码与解码 网址观察与批量生成 网址观察与批量生成 2.英文词频统计预处理 3 同一目录、绝对路径、相对路径 凯撒密码:从文件读入密函,进行加密或解密,保存到文件。 词频统计:下载一首英文的歌词或文章或小说,保存为utf8文件。从文件读 阅读全文
posted @ 2019-03-11 03:13 LaxY0013 阅读(148) 评论(0) 推荐(0) 编辑

2019年3月3日

摘要: 作业来源:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2639 1.这些分析所采用数据的来源是什么? 按产生主体 (1)企业(关系型数据库,数据仓库) (2)人(浏览信息,聊天,电子商务......) (3)机器(服务器产生日志,视 阅读全文
posted @ 2019-03-03 21:15 LaxY0013 阅读(172) 评论(0) 推荐(0) 编辑

导航