会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
飞翔的企鹅
日日行,不怕千万里;常常做,不怕千万事
博客园
首页
新随笔
联系
订阅
管理
2023年2月6日
67使用slenium自动化爬取200页职位信息(也可以用playwright)
摘要: 使用虚拟环境 创建一个 selenium版本>4 因为反爬比较严重 这里没用协议弄 采用selenium 思路:1.先用selenium,获取网页(这里获取外页,内页请求量太大),2.再解析 得到我们想要的结果 避免爬一半被反爬了 部分图 实现代码如下 # 1.获取网页 from selenium
阅读全文
posted @ 2023-02-06 11:51 __username
阅读(145)
评论(0)
推荐(0)
公告