Believe in yourself.

摘要: Scrapy是用python写的爬虫框架,架构图如下: 它可以分为如下七个部分: 1、Scrapy Engine:引擎,负责控制数据流在系统的所有组件中流动,并在相应动作发生时触发时间。 2、Scheduler:调度器,从引擎接收Request并将它们入队,以便引擎再次请求Request时提供给引擎 阅读全文
posted @ 2018-11-05 20:24 eastonliu 阅读(942) 评论(0) 推荐(0) 编辑