摘要: #作业一 要求: 熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。 使用Selenium框架爬取京东商城某类商品信息及图片。 候选网站:http://www.jd.com/ 关键词:学生自由选择 输出信息:MYSQL的输出信息如下 | mNo | mMar 阅读全文
posted @ 2021-11-25 19:34 今晚一定12点前睡觉 阅读(15) 评论(0) 推荐(0) 编辑
摘要: #作业一 作业①: 要求:熟练掌握 scrapy 中 Item、Pipeline 数据的序列化输出方法;Scrapy+Xpath+MySQL数据库存储技术路线爬取当当网站图书数据 候选网站:http://search.dangdang.com/?key=python&act=input 关键词:学生 阅读全文
posted @ 2021-11-11 18:18 今晚一定12点前睡觉 阅读(12) 评论(0) 推荐(0) 编辑
摘要: #作业一 ###要求 指定一个网站,爬取这个网站中的所有的所有图片,例如中国气象网(http://www.weather.com.cn)。分别使用单线程和多线程的方式爬取。(限定爬取图片数量为学号后3位) ###输出信息 将下载的Url信息在控制台输出,并将下载的图片存储在images子文件夹中,并 阅读全文
posted @ 2021-10-28 22:07 今晚一定12点前睡觉 阅读(13) 评论(0) 推荐(0) 编辑
摘要: 作业一 要求:在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 输出信息: 序号地区日期天气信息温度 1 北京 7日(今天) 晴间多云,北部山区有阵雨或雷阵雨转晴转多云 31℃/17℃ 2 北京 8日(明天) 多云转晴,北部地区有分散阵雨或 阅读全文
posted @ 2021-10-14 21:57 今晚一定12点前睡觉 阅读(11) 评论(0) 推荐(0) 编辑
摘要: 作业一 要求:用urllib和re库方法定向爬取给定网址(https://www.shanghairanking.cn/rankings/bcsr/2020/0812 )的数据。 输出信息: 2020排名全部层次学校类型总分 1 前2% 中国人民大学 1069.0 2...... 结果展示 分析网页 阅读全文
posted @ 2021-09-30 22:53 今晚一定12点前睡觉 阅读(47) 评论(0) 推荐(0) 编辑
摘要: 名字:林昱,031904117; 比较喜欢的食物:福大玫瑰一楼的荔枝肉; 目前挺喜欢的歌:知足; 爱好:肝genshin impact; 想说的话:据我所知,我一无所知 阅读与思考:步入大三,我是否已经准备好面对接下来的学习与生活,我该选择考研还是工作。虽然在福大学习了2年,但还是觉得自己很多东西没 阅读全文
posted @ 2021-09-14 22:25 今晚一定12点前睡觉 阅读(12) 评论(0) 推荐(0) 编辑