2019年12月15日
scrapy工作流程
摘要： 第一步：首先Spiders(爬虫)将需要发送请求的url(request)经过ScrapyEngine(引擎)交给Scheduler(调度器). 第二步：Scheduler(排序，入队)处理后，经过ScrapyEngine,DownloaderMiddlewares(可选，主要有User_Agent 阅读全文
posted @ 2019-12-15 21:53 King~~~ 阅读(1611) 评论(0) 推荐(0)