摘要: 数据采集与融合技术作业4 作业①: 要求:熟练掌握 Selenium 查找 HTML 元素、爬取 Ajax 网页数据、等待 HTML 元素等内容。 使用 Selenium 框架+ MySQL 数据库存储技术路线爬取“沪深 A 股”、“上证 A 股”、“深证 A 股”3 个板块的股票数据信息。 候选网 阅读全文
posted @ 2025-12-10 01:54 ooozyz 阅读(6) 评论(0) 推荐(0)
摘要: 数据采集与融合技术作业3 实验一 (1)实验过程 要求: 指定一个网站,爬取这个网站中的所有的所有图片,例如:中国气象网(http://www.weather.com.cn)。实现单线程和多线程的方式爬取。 –务必控制总页数(学号尾数2位)、总下载的图片数量(尾数后3位)等限制爬取的措施。 核心代码 阅读全文
posted @ 2025-11-25 20:05 ooozyz 阅读(9) 评论(0) 推荐(0)
摘要: 数据采集与融合技术作业2各任务核心代码片段、实现思路与心得体会任务一:中国气象网7日天气预报爬取与存储要求:在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。核心代码片段(抓取与解析核心)def crawl_weather(city_name 阅读全文
posted @ 2025-11-11 21:03 ooozyz 阅读(18) 评论(0) 推荐(0)
摘要: 数据采集与融合技术作业2 各任务核心代码片段、实现思路与独立心得体会 任务一:中国气象网7日天气预报爬取与存储 要求:在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 核心代码片段(抓取与解析核心) def crawl_weather(ci 阅读全文
posted @ 2025-11-11 21:02 ooozyz 阅读(10) 评论(0) 推荐(0)
摘要: 数据采集与融合技术作业1 作业① o 要求:用requests和BeautifulSoup库方法定向爬取给定网址(http://www.shanghairanking.cn/rankings/bcur/2020 )的数据,屏幕打印爬取的大学排名信息。 (1)实验部分 数据获取部分 def clean 阅读全文
posted @ 2025-10-27 15:04 ooozyz 阅读(8) 评论(0) 推荐(0)