摘要: 请求URL流程 Scarpy使用请求和响应对象来抓取网站 通常情况下,请求对象会在spider中生成,并在系统中传递,直到到达downloader,它执行请求并返回一个响应对象,该对象返回发送请求的spider。 请求和响应类都有子类,它们添加了基类中不需要的功能。 Request对象 部分参数解析 阅读全文
posted @ 2018-05-21 21:30 前路~ 阅读(2591) 评论(0) 推荐(0)