摘要: 2023数据采集与融合技术实践作业三 作业①: 要求: 熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。 使用Selenium框架+ MySQL数据库存储技术路线爬取“沪深A股”、“上证A股”、“深证A股”3个板块的股票数据信息。 候选网站:东方财富网:h 阅读全文
posted @ 2023-11-11 20:49 muyiyYANG 阅读(35) 评论(0) 推荐(0)
摘要: 2023数据采集与融合技术实践作业三 作业①: 要求: 指定一个网站,爬取这个网站中的所有的所有图片,例如:中国气象网(http://www.weather.com.cn)。使用scrapy框架分别实现单线程和多线程的方式爬取。 –务必控制总页数(学号尾数2位)、总下载的图片数量(尾数后3位)等限制 阅读全文
posted @ 2023-10-23 22:36 muyiyYANG 阅读(66) 评论(0) 推荐(0)
摘要: 2023数据采集与融合技术实践作业二 作业①: 要求: 在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 输出信息: 序号 地区 日期 天气信息 温度 1 北京 8日(今天) 小雨转晴 ... Gitee文件夹链接 代码: from bs4 阅读全文
posted @ 2023-10-17 00:55 muyiyYANG 阅读(56) 评论(0) 推荐(0)
摘要: 作业1 1)、实验要求 用requests和BeautifulSoup库方法定向爬取给定网址(http://www.shanghairanking.cn/rankings/bcur/2020 )的数据,屏幕打印爬取的大学排名信息。 输出信息: 排名 学校名称 省市 学校类型 总分 1 清华大学 北京 阅读全文
posted @ 2023-09-21 23:59 muyiyYANG 阅读(44) 评论(0) 推荐(0)