拉勾网的反爬介绍和解决方法（更新时间：2019/2/20）

拉勾网的反爬介绍和解决方法（更新时间：2019/2/20）

目录直达：

文章目录

• 拉勾网的反爬介绍和解决方法（更新时间：2019/2/20）
• • 1. 前言
  • 2. 简述
  • 3. 反爬介绍
  • • 3.1、对于职位的详情页和公司的详情页的反爬：
    • 3.2、对于职位列表页的反爬：
    • 3.3、注意：

1. 前言

最近拉勾的反爬改动比较频繁，公司采集拉勾网的爬虫又无法正式运行，花了近一周的时间来处理拉勾网的反爬问题，特别写一篇博客来记录一下拉勾的反爬

2. 简述

爬拉勾的时候，主要是采集职位相关的信息，涉及到页面有3个：

1. 输入关键词搜索后得到的职位列表页：https://www.lagou.com/jobs/list_python?px=new&city=%E4%B8%