摘要： 前段时间抓一个网站的数据，呵呵，这个网站就不说了，反正也是蛮出名的一家公司，然后数据还是挺干净的，呵呵，我让抓得很爽啊。最初抓数据的时候总是出问题，大概十来次之后就不行了，服务器拒绝，需要重新换一个IP才可以，这个IP就被封了。然后我晚上抓数据，做了一个线程睡眠，每一次数据停几十秒，过段时间停十分钟，但还是不行，搞得我白开两天的机器。 后来又尝试换成随机代理的方式去拽数据，但也不行，因为代理是透明... 阅读全文