2019 年 6月 2 日随笔档案 - 百里丶落云

2019年6月2日

摘要：前情提要: 补充知识点: ua请求头库的使用 scrapy 的中间件使用一: 下载中间件的使用 -:作用:批量拦截请求头和响应 -:拦截请求：１：串改请求头信息（Ｕｓｅｒ－Ａｇｅｎｔ）２：设置相关请求对象的代理ip(process_exception) 二: 爬虫中间件的使用一:下载中间件的阅读全文

posted @ 2019-06-02 12:51 百里丶落云阅读(478) 评论(0) 推荐(0)