shmily墨鱼

摘要： ###Scrapy框架流程图 Scrapy Engine(引擎): 负责Spider、ItemPipeline、Downloader、Scheduler中间的通讯，信号、数据传递等。 Scheduler(调度器): 它负责接受引擎发送过来的Request请求，并按照一定的方式进行整理排列，入队，当引 阅读全文

摘要： ##初识Scrapy ###安装 pip install scrapy 这里以书中的列子走了，先大概了解下 ###创建项目 $ scrapy startproject example ###分析目标 打开页面http://books.toscrape.com，查看源码，观察书本名和价格的格式 可以看 阅读全文