2018年7月16日
Scrapy 隐含 bug: 强制关闭爬虫后从 requests.queue 读取的已保存 request 数量可能有误
摘要：问题描述和解决方案已提交至 Scrapy issues： The size of requests.queue may be wrong when resuming crawl from unclean shutdown. #3333 阅读全文
posted @ 2018-07-16 09:39 my8100 阅读(446) 评论(0) 推荐(0) 编辑