2019年5月24日
scrapy主动触发关闭爬虫
摘要： 可以在直接spider、pipeline和downloaderMiddlewares中关闭爬虫 在spider中时在方法里直接写 在pipeline和downloaderMiddlewares里 虽然这一行代码会停止爬虫，但是这一行代码的停止并不是立即停止 原因是因为当我们不更改爬虫的setting 阅读全文
posted @ 2019-05-24 16:54 乔儿 阅读(899) 评论(0) 推荐(0)