会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
bd21
博客园
首页
新随笔
联系
订阅
管理
2025年12月2日
102302155张怡旋数据采集第四次作业
摘要: 一,作业一 要求:熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。使用Selenium框架+ MySQL数据库存储技术路线爬取“沪深A股”、“上证A股”、“深证A股”3个板块的股票数据信息。 候选网站:东方财富网:http://quote.eastmone
阅读全文
posted @ 2025-12-02 10:58 bd2
阅读(13)
评论(0)
推荐(0)
2025年11月19日
102302155张怡旋数据采集第三次作业
摘要: 作业一 要求:指定一个网站,爬取这个网站中的所有的所有图片。实现单线程和多线程的方式爬取。–务必控制总页数(学号尾数2位)、总下载的图片数量(尾数后3位)等限制爬取的措施。 输出信息: 将下载的Url信息在控制台输出,并将下载的图片存储在images子文件中,并给出截图。 1.核心代码和运行结果 点
阅读全文
posted @ 2025-11-19 19:43 bd2
阅读(21)
评论(0)
推荐(0)
2025年10月30日
102302155张怡旋数据采集第二次作业
摘要: 作业一 要求:在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 1.核心代码和运行结果 # 目标城市与对应天气网编码的映射 self.city_code = { "北京": "101010100", "上海": "101020100", "
阅读全文
posted @ 2025-10-30 19:32 bd2
阅读(13)
评论(0)
推荐(0)
2025年10月25日
102302155张怡旋数据采集第一次作业
摘要: 作业一 核心代码与运行结果 大体思路: 在写代码之前我先进入了该网页查看源代码的信息,了解了html的结构分布等,再进行代码的编写。代码首先用requests发送 GET 请求,添加User-Agent模拟浏览器,避免反爬拦截;接着检查请求状态(raise_for_status()),设置utf-8
阅读全文
posted @ 2025-10-25 15:29 bd2
阅读(7)
评论(0)
推荐(0)
公告