2018年6月28日
网络爬虫之scrapy框架详解
摘要： twisted介绍 Twisted是用Python实现的基于事件驱动的网络引擎框架，scrapy正是依赖于twisted， 它是基于事件循环的异步非阻塞网络框架，可以实现爬虫的并发。 twisted是什么以及和requests的区别： twisted的特点是： 非阻塞：不等待 异步：回调 事件循环： 阅读全文
posted @ 2018-06-28 17:29 人生不如戏 阅读(2725) 评论(5) 推荐(1)