Q_Pumpkin

摘要： 第五次大作业 作业1 1.1实验题目 要求： 熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。 使用Selenium框架爬取京东商城某类商品信息及图片。 **候选网站：**http://www.jd.com/ **关键词：**学生自由选择 **输出信息：* 阅读全文

摘要： 第四次大作业 作业1 1.1实验题目 **要求：**熟练掌握 scrapy 中 Item、Pipeline 数据的序列化输出方法；Scrapy+Xpath+MySQL数据库存储技术路线爬取当当网站图书数据 **候选网站：**http://search.dangdang.com/?key=python 阅读全文

摘要： 第三次大作业 作业1 1.1实验题目 **要求：**指定一个网站，爬取这个网站中的所有的所有图片，例如中国气象网（http://www.weather.com.cn）。分别使用单线程和多线程的方式爬取。(限定爬取图片数量为学号后3位) 输出信息: 将下载的Url信息在控制台输出，并将下载的图片存储在 阅读全文

摘要： 第二次大作业 作业1 1.1实验题目 **要求：**在中国气象网（http://www.weather.com.cn）给定城市集的7日天气预报，并保存在数据库。 输出信息: 序号 地区 日期 天气信息 温度 1 北京 7日（今天） 晴间多云，北部山区有阵雨或雷阵雨转晴转多云 31℃/17℃ 2 北京 阅读全文

摘要： 第一次大作业 作业① 1.1实验题目 **要求：**用urllib和re库方法定向爬取给定网址（https://www.shanghairanking.cn/rankings/bcsr/2020/0812 ）的数据。 输出信息： 2020排名 全部层次 学校类型 总分 1 前2% 中国人民大学 10 阅读全文