Loading

随笔分类 -  Scrapy

爬虫
摘要:Scrapy 1.scrapy架构图、核心七组件 Scrapy 是基于twisted框架开发而来,twisted是一个流行的事件驱动的python网络框架。因此Scrapy使用了一种非阻塞(又名异步)的代码来实现并发。 事件驱动和异步都是通过回调函数实现的。 框架:集成了基础功能的壳子,将基础的可复 阅读全文
posted @ 2020-09-09 11:22 浅忆尘 阅读(198) 评论(0) 推荐(0)