摘要： 1.在pom.xml（如果是多模块，则此pom根据需要可设为具体模块）文件中添加 <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-devtools</artifactId> <scope 阅读全文

摘要： 本次作业要求来自于：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3363 Hadoop综合大作业 要求： 1.将爬虫大作业产生的csv文件上传到HDFS 2.对CSV文件进行预处理生成无标题文本文件 首先建立一个用于运行本案例的目录 阅读全文

摘要： 本次作业要求来自于：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3310 利用Shell命令与HDFS进行交互 利用Shell命令与HDFS进行交互以”./bin/dfs dfs”开头的Shell命令方式 1.目录操作在HDFS中为 阅读全文

摘要： 本次作业要求来自于：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3223 1.安装Linux，MySql 因为电脑之前安装过了VMware Workstation，我采用的是在VMware Workstation中安装Linux。 阅读全文

摘要： 本次作业要求来自于：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3159 一.把爬取的内容用数据库保存 1.保存到sqlite3数据库 运行示例： 2.保存到MySQL数据库： 运行示例： 二.爬虫综合大作业 缘由 想了很久，不知道 阅读全文

摘要： 本次作业要求来自于：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3002 程序准备： 0.从新闻url获取点击次数，并整理成函数 1.从新闻url获取新闻详情： 字典,anews 运行示例： 2.从列表页的url获取新闻url：列表 阅读全文

摘要： 本次作业要求来自于：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2881 1. 简单说明爬虫原理 通过程序模拟浏览器请求站点的行为，发送请求，获得响应，对响应的网页代码进行解析提取自己需要的数据，存储到数据库中以供使用。 2. 理解 阅读全文

摘要： 本次作业要求来自于：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2822 中文词频统计 1. 下载一长篇中文小说。 2-7： 运行结果示例： 8. 输出词频最大TOP20，把结果存放到文件里 运行示例得到： 通过csv文件得出TOP 阅读全文

摘要： 本次作业要求来自于：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2753 1.列表，元组，字典，集合分别如何增删改查及遍历。 列表：通过[]来创建列表，可通过索引（index）来获取列表中的元素和修改元素；append() 方法向列 阅读全文

摘要： 本次作业要求来自于：https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2684 1.字符串操作： 解析身份证号：生日、性别、出生地等。 运行示例： 凯撒密码编码与解码 运行示例： 网址观察与批量生成 运行示例： 2.英文词频统计预处理 # 阅读全文