摘要: 一.Scrapy框架是基于Twisted的异步框架,纯Python实现的爬虫框架,耦合程度低,可拓展性极强。 1.Engine引擎,处理整个系统的数据流、触发事物、框架的核心 2.item项目,定义爬虫爬取结果的数据结构,爬取的数据会被赋值成该item对象 3.Schedule调度器,接受engin 阅读全文
posted @ 2018-12-21 19:58 橘子先生123 阅读(408) 评论(0) 推荐(0)