05 2020 档案

记录一次scrapy的crawlspider 详情页自动路径拼接问题
摘要：我在运行scrapy crawlspider的时候，发现首页200请求成功，但是详情页返回404，于是，进入网站，查看详情页链接是什么样子 这是列表页 直接鼠标右键，新页面打开，发现网页正常，链接如下： 这下知道原因了，是crawlspider的路... 阅读全文
posted @ 2020-05-12 17:21 数据民工 阅读(16) 评论(0) 推荐(0)