摘要： 爬虫的自我修养_7 一、scrapy-redis架构 scrapy-redis在scrapy的架构上增加了redis，基于redis的特性拓展了如下组件： Scheduler： Scrapy改造了python本来的collection.deque(双向队列)形成了自己的Scrapy queue(ht 阅读全文