摘要: 数据采集与融合技术实践 多源异构数据采集与融合应用综合实践 组名、项目简介 <组名:洛杉矶耐摔王、项目需求和目标:文字和音频总结、项目开展技术路线:python> 团队成员学号 102102127,102102124,102102125,102102123,102102144,102102146,1 阅读全文
posted @ 2023-12-14 22:54 羊耶飞舞 阅读(202) 评论(0) 推荐(0)
摘要: 数据采集与融合技术实践第四次作业 作业一 要求:熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。使用Selenium框架+ MySQL数据库存储技术路线爬取“沪深A股”、“上证A股”、“深证A股”3个板块的股票数据信息。 Gitee文件夹链接:https: 阅读全文
posted @ 2023-11-15 09:22 羊耶飞舞 阅读(168) 评论(0) 推荐(0)
摘要: 作业①: 要求: 指定一个网站,爬取这个网站中的所有的所有图片,例如:中国气象网(http://www.weather.com.cn)。使用scrapy框架分别实现单线程和多线程的方式爬取。务必控制总页数(学号尾数2位)、总下载的图片数量(尾数后3位)等限制爬取的措施。 输出信息: 将下载的Url信 阅读全文
posted @ 2023-11-02 01:18 羊耶飞舞 阅读(44) 评论(0) 推荐(0)
摘要: 第二次作业 作业1: 要求:在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 输出信息:( ) Gitee文件夹链接:https://gitee.com/hong-songyu/crawl_project/tree/master/作业2/2 阅读全文
posted @ 2023-10-17 23:25 羊耶飞舞 阅读(55) 评论(0) 推荐(0)
摘要: 作业①: 要求:用requests和BeautifulSoup库方法定向爬取给定网址(http://www.shanghairanking.cn/rankings/bcur/2020)的数据,屏幕打印爬取的大学排名信息。 输出信息: 排名 学校名称 省市 学校类型 总分 1 清华大学 北京 综合 8 阅读全文
posted @ 2023-09-26 21:38 羊耶飞舞 阅读(24) 评论(0) 推荐(0)