摘要: 综合设计——多源异构数据采集与融合应用综合实践 ​ 这个项目属于哪个课程 2023数据采集与融合技术 组名、项目简介 组名:普雷蒙奇、项目需求:多模态情感分析、项目目标:通过在网页中搜索关键词来得到一个综合的情感分析、项目开展技术路线:前端、python 、华为云平台、Django-restfram 阅读全文
posted @ 2023-12-14 23:10 liannnn 阅读(40) 评论(0) 推荐(0)
摘要: 作业1: ·要求: ·熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。 ·使用Selenium框架+ MySQL数据库存储技术路线爬取“沪深A股”、“上证A股”、“深证A股”3个板块的股票数据信息。 ·候选网站:东方财富网:http://quote.eas 阅读全文
posted @ 2023-11-16 00:24 liannnn 阅读(38) 评论(0) 推荐(0)
摘要: 作业①:要求:指定一个网站,爬取这个网站中的所有的所有图片,例如:中国气象网(http://www.weather.com.cn)。使用scrapy框架分别实现单线程和多线程的方式爬取。–务必控制总页数(学号尾数2位)、总下载的图片数量(尾数后3位)等限制爬取的措施。 输出信息: 将下载的Url信息 阅读全文
posted @ 2023-11-01 21:38 liannnn 阅读(103) 评论(0) 推荐(0)
摘要: 作业① 实验要求 ·在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 ·Gitee文件夹链接:https://gitee.com/lian111111/crawl_project/tree/master/数据采集与融合技术第二次作业/作业2 阅读全文
posted @ 2023-10-18 18:45 liannnn 阅读(53) 评论(0) 推荐(0)
摘要: 作业1: 要求:用REQUESTS和BEAUTIFULSOUP库方法定向爬取给定网址(HTTP://WWW.SHANGHAIRANKING.CN/RANKINGS/BCUR/2020)的数据,屏幕打印爬取的大学排名信息。 输出信息: 排名 学校名称 省市 学校类型 总分 1 清华大学 北京 综合 8 阅读全文
posted @ 2023-09-26 21:43 liannnn 阅读(42) 评论(0) 推荐(0)