摘要: 这个项目属于哪个课程 2025数据采集与融合技术 组名、项目简介 组名:基米大哈气 项目背景:针对B站视频评论信息量大、内容杂乱的问题,提供智能化的筛选与分类方案,帮助用户快速了解视频评论风向。 项目目标:开发一个支持评论爬取、智能分类、违禁词管理及可视化分析的综合系统,实现对评论内容的精准筛选与多 阅读全文
posted @ 2025-12-30 16:25 woshinida 阅读(21) 评论(0) 推荐(0)
摘要: 作业①: o 要求: ▪ 熟练掌握 Selenium 查找 HTML 元素、爬取 Ajax 网页数据、等待 HTML 元素等内 容。 ▪ 使用 Selenium 框架+ MySQL 数据库存储技术路线爬取“沪深 A 股”、“上证 A 股”、 “深证 A 股”3 个板块的股票数据信息。 o 候选网站: 阅读全文
posted @ 2025-12-07 17:50 woshinida 阅读(40) 评论(0) 推荐(0)
摘要: 作业①: 要求:指定一个网站,爬取这个网站中的所有的所有图片,例如:中国气象网(http://www.weather.com.cn)。实现单线程和多线程的方式爬取。 通过解析htlm,找到所有<img>标签,爬取所有图片 。 完整代码: import os import re import requ 阅读全文
posted @ 2025-11-23 16:23 woshinida 阅读(20) 评论(0) 推荐(0)
摘要: 作业1: 要求:在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。完整代码以及运行结果 from bs4 import BeautifulSoup from bs4 import UnicodeDammit import urllib.req 阅读全文
posted @ 2025-11-09 12:24 woshinida 阅读(15) 评论(0) 推荐(0)
摘要: 作业1:用requests和BeautifulSoup库方法定向爬取给定网址(http://www.shanghairanking.cn/rankings/bcur/2020 )的数据,屏幕打印爬取的大学排名信息。完整代码以及运行结果心得体会:学会了使用BeautifulSoup的常用方法。作业2: 阅读全文
posted @ 2025-10-26 14:59 woshinida 阅读(9) 评论(0) 推荐(0)