摘要: 试想一下,前面做的实验和例子都只有一个spider。然而,现实的开发的爬虫肯定不止一个。既然这样,那么就会有如下几个问题:1、在同一个项目中怎么创建多个爬虫的呢?2、多个爬虫的时候是怎么将他们运行起来呢? 说明:本文章是基于前面几篇文章和实验的基础上完成的。如果您错过了,或者有疑惑的地方可以在此查看 阅读全文
posted @ 2018-01-16 23:35 zjkkbne 阅读(164) 评论(0) 推荐(0) 编辑
摘要: http://blog.csdn.net/u011781521/article/details/70188171 http://wiki.jikexueyuan.com/project/scrapy/autothrottle.html coding: utf 8 Scrapy settings fo 阅读全文
posted @ 2018-01-16 23:21 zjkkbne 阅读(153) 评论(0) 推荐(0) 编辑