摘要:
配置Scrapy Redis 配置Scrapy Redis非常简单,只需要修改一下settings.py配置文件即可。 1. 核心配置 首先最主要的是,需要将调度器的类和去重的类替换为Scrapy Redis提供的类,在settings.py里面添加如下配置即可 2. Redis连接配置 第一种,直 阅读全文
posted @ 2019-05-29 11:59
公众号python学习开发
阅读(430)
评论(0)
推荐(0)
摘要:
这里以http://bj.maitian.cn/esfall/PG1为例子,然后获取标题。 阅读全文
posted @ 2019-05-29 09:25
公众号python学习开发
阅读(170)
评论(0)
推荐(0)

浙公网安备 33010602011771号