摘要: 数据采集与融合技术实践 多源异构数据采集与融合应用综合实践 组名、项目简介 <组名:洛杉矶耐摔王、项目需求和目标:文字和音频总结、项目开展技术路线:python> 团队成员学号 102102127,102102124,102102125,102102123,102102144,102102146,1 阅读全文
posted @ 2023-12-14 22:12 xdajun 阅读(67) 评论(0) 推荐(0)
摘要: 第四次作业 码云链接 一、作业内容 作业①: 要求: 熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。 使用Selenium框架+ MySQL数据库存储技术路线爬取“沪深A股”、“上证A股”、“深证A股”3个板块的股票数据信息。 候选网站:东方财富网:ht 阅读全文
posted @ 2023-11-15 19:26 xdajun 阅读(32) 评论(0) 推荐(0)
摘要: 作业内容 gitee 代码链接 作业①: 要求: 指定一个网站,爬取这个网站中的所有的所有图片,例如:中国气象网(http://www.weather.com.cn)。使用scrapy框架分别实现单线程和多线程的方式爬取。 –务必控制总页数(学号尾数2位)、总下载的图片数量(尾数后3位)等限制爬取的 阅读全文
posted @ 2023-11-01 22:45 xdajun 阅读(39) 评论(0) 推荐(0)
摘要: 第二次作业 一、作业内容 作业①: 要求:在中国气象网http://www.weather.com.cn给定城市集的7日天气预报,并保存在数据库。 输出信息: Gitee文件夹链接 https://gitee.com/wu-qiyan/project/tree/master/%E6%95%B0%E6 阅读全文
posted @ 2023-10-10 22:35 xdajun 阅读(115) 评论(0) 推荐(0)
摘要: 一、作业内容 作业1: 要求:用requests和BeautifulSoup库方法定向爬取给定网址的数据,屏幕打印爬取的大学排名信息。 输出信息: 排名 学校名称 省市 学校类型 总分 1 清华大学 北京 综合 852.5 2...... 代码如下: import urllib.request fr 阅读全文
posted @ 2023-09-21 16:33 xdajun 阅读(74) 评论(0) 推荐(0)