打开fiddler之后,python写的爬虫无法正常运行

fiddler在关闭状态下python爬虫正常, fiddler打开之后,python写的爬虫卡住了,如下代码搞定;

import requests 

import urllib3
urllib3.disable_warnings()

data = requests.get(url='https://www.baidu.com', proxies={'http': 'http://127.0.0.1:8888', 'https': 'http://127.0.0.1:8888'}, verify = False ).text 
print(data)

1、python需要设置代理, 红色部分的代码;

2、处理ssl证书问题,蓝色部分的代码;

posted @ 2022-03-02 13:52  IT高薪猎头  阅读(670)  评论(0编辑  收藏  举报