会员
周边
新闻
博问
闪存
众包
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
王大拿
随笔分类 -
爬虫
爬虫——为什么有代理
摘要:我们在做爬虫的过程中经常会遇到这样的情况,最初爬虫正常运行,正常抓取数据,一切看起来都是那么美好,然而一杯茶的功夫可能就会出现错误,比如403 Forbidden,这时候打开网页一看,可能会看到“您的IP访问频率太高”这样的提示。出现这种现象的原因是网站采取了一些反爬虫措施。比如,服务器会检测某个I
阅读全文
posted @
2018-11-26 10:43
王大拿
阅读(410)
评论(0)
推荐(0)
导航
博客园
首页
新随笔
联系
订阅
管理
公告