摘要: scrapy 架构图 从上图中可以看到scrapy的数据流向1.从书写的spiders开始会抛出 (yield) requests 到scrapy引擎(engine)中2.engine 没有对request 做任何处理,直接将 requests 交给 scheduler3.由scheduler生成r 阅读全文
posted @ 2019-02-21 22:05 菜鸟的future 阅读(116) 评论(0) 推荐(0)