分布式和增量式爬虫设置

分布式爬虫

基于spider-redis实现

增量式爬虫

posted @ 2019-07-12 17:33  DF-包子  阅读(101)  评论(0)    收藏  举报