打开fiddler之后,python写的爬虫无法正常运行

fiddler在关闭状态下python爬虫正常, fiddler打开之后,python写的爬虫卡住了,如下代码搞定;

1
2
3
4
5
6
7
import requests
 
import urllib3
urllib3.disable_warnings()
 
data = requests.get(url='https://www.baidu.com', proxies={'http': 'http://127.0.0.1:8888', 'https': 'http://127.0.0.1:8888'}, verify = False ).text
print(data)

1、python需要设置代理, 红色部分的代码;

2、处理ssl证书问题,蓝色部分的代码;

posted @   鸽子飞扬  阅读(780)  评论(0编辑  收藏  举报
相关博文:
阅读排行:
· 周边上新:园子的第一款马克杯温暖上架
· Open-Sora 2.0 重磅开源!
· .NET周刊【3月第1期 2025-03-02】
· 分享 3 个 .NET 开源的文件压缩处理库,助力快速实现文件压缩解压功能!
· [AI/GPT/综述] AI Agent的设计模式综述
点击右上角即可分享
微信分享提示