2020年4月24日
scrapy 分布式爬取数据同步写入数据库
摘要： spider文件 继承RedisCrawlSpider，实现全站爬取数据 import scrapy from scrapy.linkextractors import LinkExtractor from scrapy.spiders import CrawlSpider, Rule from h 阅读全文
posted @ 2020-04-24 01:20 一只小小的寄居蟹 阅读(827) 评论(0) 推荐(0)