摘要: 下载中间件三大函数 1. process_request(request,spider)拦截request ​ 返回值(4种) ​ 返回 None 正常情况是none ​ 返回 request 重新放回队列 ​ 返回 response ​ raises IgnoreRequest 抛弃这个reque 阅读全文
posted @ 2020-04-20 10:26 Mario_ok 阅读(145) 评论(0) 推荐(0)
摘要: 首次scrapy的58爬虫 house_test pipelines main items 阅读全文
posted @ 2020-04-20 10:25 Mario_ok 阅读(158) 评论(0) 推荐(0)
摘要: 初入scrapy 1. 进入cmd,到我创建的文件夹E:spyder 2. 创建一个项目 例如:city_58 3. 输入代码:scrapy startproject city_58 4. 然后进入city_58项目目录下 cd city_58 5. 开始创建爬虫程序 scrapy genspide 阅读全文
posted @ 2020-04-20 10:23 Mario_ok 阅读(146) 评论(0) 推荐(0)