摘要: 一、代理与反向代理 现实生活中的例子 1、正向代理:访问google.com 如上图,因为google被墙,我们需要vpnFQ才能访问google.com。 vpn对于“我们”来说,是可以感知到的(我们连接vpn)vpn对于"google服务器"来说,是不可感知的(google只知道有http请求过 阅读全文
posted @ 2019-02-20 14:49 柔和的天空 阅读(360) 评论(0) 推荐(0)
摘要: 我们都知道网络上的爬虫非常多,有对网站收录有益的,比如百度蜘蛛(Baiduspider),也有不但不遵守robots 规则对服务器造成压力,还不能为网站带来流量的无用爬虫,比如宜搜蜘蛛(YisouSpider)(最新补充:宜搜蜘蛛已被UC神马搜索收购!所以本文已去掉宜搜蜘蛛的禁封! ==> 相关文章 阅读全文
posted @ 2019-02-20 13:08 柔和的天空 阅读(1097) 评论(0) 推荐(0)