摘要: #作业① ##要求: ###熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。 ###使用Selenium框架爬取京东商城某类商品信息及图片。 候选网站 (http://www.jd.com/) ##输出信息: MySQL数据库存储和输出格式如下: ##代码 阅读全文
posted @ 2021-11-24 17:28 Flyme10086 阅读(37) 评论(0) 推荐(0) 编辑
摘要: #作业① ##要求: ###熟练掌握 scrapy 中 Item、Pipeline 数据的序列化输出方法,用Scrapy+Xpath+MySQL数据库存储技术路线爬取当当网站图书数据。 候选网站 (http://www.dangdang.com/) ##输出信息: MySQL数据库存储和输出格式如下 阅读全文
posted @ 2021-11-10 23:53 Flyme10086 阅读(14) 评论(0) 推荐(0) 编辑
摘要: #作业① ##要求: ###指定一个网站,爬取这个网站中的所有的所有图片,例如中国气象网(http://www.weather.com.cn)。分别使用单线程和多线程的方式爬取。(限定爬取图片数量为学号后3位) ##输出信息: 将下载的Url信息在控制台输出,并将下载的图片存储在images子文件夹 阅读全文
posted @ 2021-10-27 21:57 Flyme10086 阅读(48) 评论(0) 推荐(0) 编辑
摘要: #作业① ##要求: ###在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 ##输出信息: | 序号 | 地区 | 日期 | 天气信息 | 温度 | | | | | | | | 1 | 北京 | 7日(今天) | 晴间多云,北部山区有阵雨 阅读全文
posted @ 2021-10-13 18:31 Flyme10086 阅读(41) 评论(0) 推荐(0) 编辑
摘要: #作业① ##1)要求: ###用urllib和re库方法定向爬取给定网址(https://www.shanghairanking.cn/rankings/bcsr/2020/0812 )的数据。 ###输出信息: 2020排名|全部层次|学校类型|总分 : :|: :|: :|: : 1|前2%| 阅读全文
posted @ 2021-09-29 20:48 Flyme10086 阅读(44) 评论(0) 推荐(0) 编辑
摘要: #一、自我介绍 031904107;我是方浩宇;我的爱好是摸鱼;福大食堂中最喜欢的一道菜:烤鸭腿饭(玫瑰园二楼小米米大碗饭);《国际歌》;我好想放假。 #二、阅读与思考 1、学会独立思考,摆正心态、克服浮躁感。 2、更加多看书,看好书,并且一定一定要做笔记。 3、未来充满不确定性,但不做永远没未来。 阅读全文
posted @ 2021-09-06 20:02 Flyme10086 阅读(15) 评论(0) 推荐(0) 编辑