2021年11月28日
数据采集与融合技术_实践5
##作业①: 要求： 熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。 使用Selenium框架爬取京东商城某类商品信息及图片。 候选网站：http://www.jd.com/ 关键词：学生自由选择 ###1.1 实验过程 1.1.1 模拟用户搜索商品关键 Read More
posted @ 2021-11-28 11:42 游稚卜 Views(24) Comments(0) Diggs(0) Edit
2021年11月14日
数据采集与融合技术_实践4
##作业① 要求：熟练掌握 scrapy 中 Item、Pipeline 数据的序列化输出方法；Scrapy+Xpath+MySQL数据库存储技术路线爬取当当网站图书数据 候选网站：http://search.dangdang.com/?key=python&act=input ###1.1 实验思 Read More
posted @ 2021-11-14 23:57 游稚卜 Views(61) Comments(0) Diggs(0) Edit
2021年11月4日
数据采集与融合技术_实践3
##任务①: **要求：**指定一个网站，爬取这个网站中的所有的所有图片，例如中国气象网（http://www.weather.com.cn）。分别使用单线程和多线程的方式爬取。(限定爬取图片数量为学号后3位) 输出信息: 将下载的Url信息在控制台输出，并将下载的图片存储在images子文件中，并 Read More
posted @ 2021-11-04 19:07 游稚卜 Views(20) Comments(0) Diggs(0) Edit
2021年10月16日
数据采集与融合技术_实践2
##任务①: **要求：**在中国气象网（http://www.weather.com.cn）给定城市集的7日天气预报，并保存在数据库。 序号 地区 日期 天气信息 温度 1 北京 7日（今天） 晴间多云，北部山区有阵雨或雷阵雨转晴转多云 31℃/17℃ ###1.1 实验步骤 ####1.1.1 Read More
posted @ 2021-10-16 13:11 游稚卜 Views(38) Comments(0) Diggs(0) Edit
2021年10月2日
数据采集与融合技术_实践1
作业① **要求：**用urllib和re库方法定向爬取给定网址（https://www.shanghairanking.cn/rankings/bcsr/2020/0812 ）的数据。 输出信息： 2020排名 全部层次 学校类型 总分 1 前2% 中国人民大学 1069.0 2...... 1） Read More
posted @ 2021-10-02 07:53 游稚卜 Views(86) Comments(0) Diggs(0) Edit
2021年9月13日
软工第一次作业
一、自我介绍 031904101；我是蔡万霖；我的爱好是网球；推荐三区玫瑰园的蛋炒苦瓜；最近喜欢听色香水；希望一切有始有终，不负所望。 二、组队 小组成员：曾庆聪 林莲巧 尚思佳 蔡万霖 林靖淞 黄舒俊 黄玺珺 郑捷 三.阅读与思考 ①未来的选择很多，喜欢就往前冲，迈步就是胜利。 ②独立思考的能力很 Read More
posted @ 2021-09-13 14:26 游稚卜 Views(31) Comments(0) Diggs(0) Edit