2019年8月9日
Scrapy 关于代理IP池的因为版本问题造成的坑
摘要： 在网上的哥们上抄的获取代理池，但是一直使用都报告失去响应，以为一直是代理不能用，其实是在我们的middlewares的中间件ProxyMiddleWare的问题(我的版本是python3.7，Scrapy1.5.1)贴出改后的代码 class ProxyMiddleWare(object): """ 阅读全文
posted @ 2019-08-09 19:35 blackworm 阅读(741) 评论(0) 推荐(1)