摘要: 【数据采集与融合技术】第五次大作业 作业① 要求: 熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。 使用Selenium框架爬取京东商城某类商品信息及图片。 **候选网站:**http://www.jd.com/ **关键词:**学生自由选择 **输出信 阅读全文
posted @ 2021-12-05 23:44 Poootato 阅读(10) 评论(0) 推荐(0) 编辑
摘要: 【数据采集与融合技术】第四次大作业 作业① **要求:**熟练掌握 scrapy 中 Item、Pipeline 数据的序列化输出方法;Scrapy+Xpath+MySQL数据库存储技术路线爬取当当网站图书数据 **候选网站:**http://search.dangdang.com/?key=pyt 阅读全文
posted @ 2021-11-23 01:24 Poootato 阅读(10) 评论(0) 推荐(0) 编辑
摘要: #【数据采集与融合技术】第三次大作业 作业① 要求:指定一个网站,爬取这个网站中的所有的所有图片,例如中国气象网(http://www.weather.com.cn)。分别使用单线程和多线程的方式爬取。(限定爬取图片数量为学号后3位) 输出信息: 将下载的Url信息在控制台输出,并将下载的图片存储在 阅读全文
posted @ 2021-11-02 23:53 Poootato 阅读(30) 评论(0) 推荐(0) 编辑
摘要: 【数据采集与融合技术】第二次大作业 作业① ##要求:在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 ##输出信息: |序号|地区|日期 |天气信息 |温度| | | | | | --| |1 |北京 |7日(今天)|晴间多云,北部山区有 阅读全文
posted @ 2021-10-19 00:50 Poootato 阅读(33) 评论(0) 推荐(0) 编辑
摘要: 【数据采集与融合技术】第一次大作业 作业① 要求:用urllib和re库方法定向爬取给定网址的数据。 网址:https://www.shanghairanking.cn/rankings/bcsr/2020/0812 输出格式: 2020排名 全部层次 学校类型 总分 1 前2% 中国人民大学 10 阅读全文
posted @ 2021-10-01 15:28 Poootato 阅读(16) 评论(0) 推荐(0) 编辑
摘要: 软工第一次作业 一、自我介绍 学号是031904115; 名字叫林靖淞; 喜欢吃蒸蛋、蒸土豆片、麻婆豆腐、番茄炒蛋、花菜,大家都是下饭的好同志!(玫瑰园一楼食惠餐饮); 最近喜欢听Teenage Blue-Dreamgirl; 午觉想睡得饱饱的啊。 二、阅读与思考 如今我已不再感到彷徨 我想超越这平 阅读全文
posted @ 2021-09-12 14:11 Poootato 阅读(12) 评论(0) 推荐(0) 编辑