打开fiddler之后,python写的爬虫无法正常运行
fiddler在关闭状态下python爬虫正常, fiddler打开之后,python写的爬虫卡住了,如下代码搞定;
1 2 3 4 5 6 7 | import requests import urllib3 urllib3.disable_warnings() data = requests.get(url = 'https://www.baidu.com' , proxies = { 'http' : 'http://127.0.0.1:8888' , 'https' : 'http://127.0.0.1:8888' }, verify = False ).text print (data) |
1、python需要设置代理, 红色部分的代码;
2、处理ssl证书问题,蓝色部分的代码;
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 周边上新:园子的第一款马克杯温暖上架
· Open-Sora 2.0 重磅开源!
· .NET周刊【3月第1期 2025-03-02】
· 分享 3 个 .NET 开源的文件压缩处理库,助力快速实现文件压缩解压功能!
· [AI/GPT/综述] AI Agent的设计模式综述