scrapy 模拟登陆

https://scrapy-cookbook.readthedocs.io/zh_CN/latest/scrapy-11.html

scrapy 模拟登陆

selenium 安装

pip3 install selenium

下载对应的浏览器驱动

先检查下自己的浏览器的版本

下载对应版本的驱动

chrome version

解压然后将驱动命令放到环境变量中

1. 解压

2. 添加到环境变量中的目录

3. 设置命令的执行权限

chmod u+x,o+x chromedriver

4. 检查下版本

chromedriver --version

测试

from selenium import webdriver

browser = webdriver.Chrome()
browser.get('http://www.baidu.com/')

会自动打开浏览器 进入百度