2020年3月14日
scrapy中使用selenium来爬取页面
摘要： scrapy中使用selenium来爬取页面 scrapy中如果下载中间件的 返回的是一个response对象，那么它会直接将该response返回 在这里利用selenium将网页渲染过的html抓取下来,然后在将其转换为scrapy所能解析的response对象 最后在spider中的parse 阅读全文
posted @ 2020-03-14 15:40 Ivy丶 阅读(458) 评论(0) 推荐(0)