摘要: ##作业①: ####1)京东商品爬取 – 要求:熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。 – 使用Selenium框架爬取京东商城某类商品信息及图片。 – 候选网站:http://www.jd.com/ – 关键词:学生自由选择 – 输出信息:M 阅读全文
posted @ 2021-12-03 16:02 Dun_w 阅读(42) 评论(0) 推荐(0) 编辑
摘要: ##作业①: ####1)当当网图书信息爬取 – 要求:熟练掌握 scrapy 中 Item、Pipeline 数据的序列化输出方法;Scrapy+Xpath+MySQL数据库存储技术路线爬取当当网站图书数据 – 候选网站:http://search.dangdang.com/?key=python 阅读全文
posted @ 2021-11-18 10:19 Dun_w 阅读(43) 评论(0) 推荐(0) 编辑
摘要: ##作业①: ####1)中国气象网图片的爬取 – 要求:要求:指定一个网站,爬取这个网站中的所有的所有图片,例如中国气象网(http://www.weather.com.cn)。 – 分别使用单线程和多线程的方式爬取。(限定爬取图片数量为学号后3位) – 输出信息:将下载的Url信息在控制台输出, 阅读全文
posted @ 2021-11-04 21:23 Dun_w 阅读(79) 评论(0) 推荐(0) 编辑
摘要: ##作业①: ####1)天气预报信息的爬取 – 要求:在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 – 输出信息: | 序号 | 地区 | 日期 |天气信息 | 温度 | | : : | : : | : : | : : | : : | 阅读全文
posted @ 2021-10-18 22:33 Dun_w 阅读(135) 评论(0) 推荐(0) 编辑
摘要: ##作业①: ###1)大学软工排名信息的爬取 – 要求:用urllib和re库方法定向爬取给定网址https://www.shanghairanking.cn/rankings/bcsr/2020/0812的数据。 – 输出信息: | 2020排名 | 全部层次 | 学校名称 | 总分 | | : 阅读全文
posted @ 2021-10-02 15:44 Dun_w 阅读(83) 评论(0) 推荐(0) 编辑
摘要: 一、自我介绍 031904110;我是黄杜恩;我的爱好是🏀;福大食堂中最喜欢的一道菜:菠萝虾仁焗饭(玫瑰园二楼);《好汉歌》;我想睡觉。 二、阅读与思考 1、学会独立思考,多看抽象的知识。 2、多接触外界事物,能够快速了解并学习新知识。 3、未来还是打算考研,不是很想太快踏入社会。 阅读全文
posted @ 2021-09-17 09:42 Dun_w 阅读(28) 评论(0) 推荐(0) 编辑