Fork me on GitHub
摘要: 项目中维护爬虫 由于服务器会不定期的给重启一下,这样每次都要登录服务器去手动在schedule下爬虫很麻烦,所以想办法在服务器重启后自己去调取起爬虫的程序。 首先,爬虫是用scrapyd管理调度的,所以服务器启动后,先执行scrapyd.exe 然后,再调度spider 第一步:start_scra 阅读全文
posted @ 2018-06-27 22:58 TaoTao~ 阅读(874) 评论(0) 推荐(0)