摘要： ​ ​ 先通过这张图来简单回顾一下Scrapy的工作原理。 ​​ ​ 引擎(Scrapy Engine): 用来处理整个系统的数据流处理, 触发事务(框架核心),可以类比为指挥部。调度器(Scheduler): 用来接受引擎发过来的请求, 压入队列中, 并在引擎再次请求的时候返回。 可以想像成一个U 阅读全文