WAN*Y - 博客园

【大数据】爬虫综合大作业

摘要：作业要求来自于 https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/3075 全球影迷期待的《复仇者联盟4》将于4月24日在内地上映。影片自开启预售以来，就创下一系列票房纪录——在美国仅用6小时就刷新了预售首日票房纪录，在中国内地用36小时阅读全文

posted @ 2019-04-28 20:52 WAN*Y 阅读(608) 评论(0) 推荐(0)

【大数据】爬取全部的校园新闻

摘要： 1.从新闻url获取新闻详情：字典,anews 2.从列表页的url获取新闻url：列表append(字典) alist 3.生成所页列表页的url并获取全部新闻：列表extend(列表) allnews *每个同学爬学号尾数开始的10个列表页 4.设置合理的爬取间隔 import time i 阅读全文

posted @ 2019-04-12 21:52 WAN*Y 阅读(329) 评论(0) 推荐(0)

【大数据】理解爬虫原理

摘要： 1. 简单说明爬虫原理通过代码从网页抓取所需的信息。 2. 理解爬虫开发过程 1).简要说明浏览器工作原理；从浏览器输入地址请求网页，服务器响应，传输网页，浏览器渲染并显示。 2).使用 requests 库抓取网站数据；以下代码在课堂上用jupyter实现过了 requests.get(ur 阅读全文

posted @ 2019-03-27 21:57 WAN*Y 阅读(277) 评论(0) 推荐(0)

【大数据】中文词频统计

摘要：中文词频统计 1. 下载一长篇中文小说。汤姆索亚历险记 2. 从文件读取待分析文本。 3. 安装并使用jieba进行中文分词。 pip install jieba import jieba ljieba.lcut(text) 4. 更新词库，加入所分析对象的专业词汇。 jieba.add_word 阅读全文

posted @ 2019-03-18 21:54 WAN*Y 阅读(1388) 评论(0) 推荐(0)

【大数据】复合数据类型，英文词频统计

摘要： 1.列表，元组，字典，集合分别如何增删改查及遍历。（1）列表（2）元组 tr=['30','50'] tr2=['20','30'] del tr #删除整个元组 tr3=tr+tr2 #把两个元组组合在一起，结果为tr3=['30','50','20','30'] printf(tr[0]) 阅读全文

posted @ 2019-03-14 21:58 WAN*Y 阅读(269) 评论(0) 推荐(0)

【大数据】字符串、文件操作，英文词频统计预处理

摘要： 1.字符串操作：解析身份证号：生日、性别、出生地等。解析身份证号：生日、性别、出生地等。凯撒密码编码与解码凯撒密码编码与解码网址观察与批量生成网址观察与批量生成 2.英文词频统计预处理下载一首英文的歌词或文章或小说，保存为utf8文件。从文件读出字符串。将所有大写转换为小写将所有阅读全文

posted @ 2019-03-06 21:21 WAN*Y 阅读(267) 评论(0) 推荐(0)

软件工程Ⅱ：四则运算升级版

摘要：作业要求来自 https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/2232 我的结对同伴 https://www.cnblogs.com/bufengdianbuchengmo/p/9867075.html 我们的程序代码 https:// 阅读全文

posted @ 2018-10-29 12:21 WAN*Y 阅读(155) 评论(0) 推荐(0)

软件工程Ⅱ：小学四则运算

摘要：作业要求来源于 https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/2186 我的GitHub远端库 https://github.com/WAN-Y/gggit 一、题目要求：像《构建之法》的人物阿超那样，写一个能自动生成小学四则运算题阅读全文

posted @ 2018-10-15 13:28 WAN*Y 阅读(245) 评论(1) 推荐(0)

软件工程Ⅱ：读《构建之法》1~5章有感

摘要：作业要求来源于 https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/2178 国庆假期期间，我观看了这本软件工程课程所提供的教材。以下是我的读书笔记。第1章概论这一章主要讲述了软件工程的概念，提出了一些延伸问题引导我们去思考。并给出了阅读全文

posted @ 2018-10-08 11:56 WAN*Y 阅读(181) 评论(4) 推荐(0)

软件工程Ⅱ：Git的安装与使用

摘要：作业要求来自于https://edu.cnblogs.com/campus/gzcc/GZCC-16SE2/homework/2097 1.下载安装配置用户名和邮箱。 (1) 安装Git软件。 (2) 配置用户名和邮箱并确认。 2. 创建工作目录并通过git init命令把这个目录变成Git可以管理阅读全文

posted @ 2018-09-17 17:27 WAN*Y 阅读(767) 评论(2) 推荐(0)