10 2017 档案

摘要:通常开发好的Scrapy爬虫部署到服务器上,要不使用nohup命令,要不使用scrapyd。如果使用nohup命令的话,爬虫挂掉了,你可能还不知道,你还得上服务器上查或者做额外的邮件通知操作。如果使用scrapyd,就是部署爬虫的时候有点复杂,功能少了点,其他还好。 SpiderKeeper是一款管 阅读全文
posted @ 2017-10-18 18:17 Gin.p 阅读(6565) 评论(0) 推荐(1)