2018年10月5日
scrapy架构简介
摘要： 一.scrapy架构介绍 1.结构简图： 主要组成部分：Spider（产出request，处理response），Pipeline，Downloader，Scheduler，Scrapy Engine 2.结构详细图： 主要步骤（往复循环）： 1.Spiders（自己书写的爬虫逻辑，处理url及网页 阅读全文
posted @ 2018-10-05 21:34 biu嘟 阅读(1821) 评论(0) 推荐(0)