scrapy_redis settings配置
摘要：
DOWNLOAD_DELAY = 5 # The download delay setting will honor only one of: # 指定使用scrapy-redis的调度器 SCHEDULER = "scrapy_redis.scheduler.Scheduler" # 指定使用scrapy-redis的去重 DUPEFILTER_CLASS = 'scrapy_redis.... 阅读全文
posted @ 2019-08-06 09:44 零度风格 阅读(959) 评论(0) 推荐(0) 编辑
