2016年12月5日

python3实现网络爬虫（7）-- 使用ip代理抓取网页

摘要： 在抓取一个网站的信息时，如果我们进行频繁的访问，就很有可能被网站检测到而被屏蔽，解决这个问题的方法就是使用ip代理 。在我们接入因特网进行上网时，我们的电脑都会被分配一个全球唯一地ip地址供我们使用，而当我们频繁访问一个网站时，网站也正是因为发现同一个ip地址访问多次而进行屏蔽的，所以这时候如果我们... 阅读全文

posted @ 2016-12-05 17:05 云端翱翔 阅读(253) 评论(0) 推荐(0)

导航