摘要: 第五次作业 一、作业内容 作业①: 要求: 熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。 使用Selenium框架爬取京东商城某类商品信息及图片。 候选网站:http://www.jd.com/ 关键词:学生自由选择 输出信息:MYSQL的输出信息如下 阅读全文
posted @ 2021-12-07 20:47 Kilig_7 阅读(90) 评论(1) 推荐(0) 编辑
摘要: 作业一 作业①:要求:熟练掌握 scrapy 中 Item、Pipeline 数据的序列化输出方法;Scrapy+Xpath+MySQL数据库存储技术路线爬取当当网站图书数据候选网站:http://search.dangdang.com/?key=python&act=input关键词:学生可自由选 阅读全文
posted @ 2021-11-23 18:18 Kilig_7 阅读(35) 评论(0) 推荐(0) 编辑
摘要: 数据挖掘第三次实践 作业一 天气图片爬取实验 作业内容 指定一个网站,爬取这个网站中的所有的所有图片,例如中国气象网(http://www.weather.com.cn)。分别使用单线程和多线程的方式爬取。(限定爬取图片数量为学号后3位) 实践过程 主要思路,首先观察网站不难发现,中国气象网内部的u 阅读全文
posted @ 2021-11-09 21:41 Kilig_7 阅读(65) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2021-11-09 20:33 Kilig_7 阅读(16) 评论(0) 推荐(0) 编辑
摘要: 数据采集第二次作业 作业1: 1、实验内容 要求: 在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 输出信息: 序号地区日期天气信息温度 1 北京7日(今天) 晴间多云,北部山区有阵雨或雷阵雨转晴转多云 31℃/17℃ 2 北京8日(明天 阅读全文
posted @ 2021-10-25 22:12 Kilig_7 阅读(22) 评论(0) 推荐(0) 编辑
摘要: 作业一 要求:使用用urllib和re库方法定向爬取给定网址中国最好学科排名(计算机科学与技术)的数据。 输出形式: 2020排名全部层次学校类型总分 1 前2% 中国人民大学 1069.0 2 .... ........... ...... 具体实现如下: 1.1获取HTML文件 def GetH 阅读全文
posted @ 2021-10-05 17:32 Kilig_7 阅读(97) 评论(0) 推荐(0) 编辑
摘要: 学号:031904126,我是吴杨海;爱好动漫,游戏等。肯德基yyds,好吃到跺jiojio,简直绝绝子;推荐一首歌《Awake》;我顶着大太阳,只想为你撑伞。 阅读全文
posted @ 2021-09-15 10:49 Kilig_7 阅读(10) 评论(0) 推荐(0) 编辑