打开fiddler之后,python写的爬虫无法正常运行
fiddler在关闭状态下python爬虫正常, fiddler打开之后,python写的爬虫卡住了,如下代码搞定;
import requests import urllib3 urllib3.disable_warnings() data = requests.get(url='https://www.baidu.com', proxies={'http': 'http://127.0.0.1:8888', 'https': 'http://127.0.0.1:8888'}, verify = False ).text print(data)
1、python需要设置代理, 红色部分的代码;
2、处理ssl证书问题,蓝色部分的代码;