Python中模拟http请求时使用代理
在某些情况下我们有必要设置我们请求时的代理服务器,在哪些情况下自己决定,那么如何设置http请求时的代理呢?
与Python自动处理cookie一样,使用urllib2.build_opener来进行构建。
1 import urllib2 2 3 enable_proxy = True 4 proxy_handler = urllib2.ProxyHandler({"http" : 'http://192.168.1.235:8080'}) 5 null_proxy_handler = urllib2.ProxyHandler({}) 6 7 if enable_proxy: 8 opener = urllib2.build_opener(proxy_handler) 9 else: 10 opener = urllib2.build_opener(null_proxy_handler) 11 12 urllib2.install_opener(opener)
使用 urllib2.install_opener() 会设置 urllib2 的全局 opener,后面使用起来非常方便
1 req=urllib2.Request(url,encode_post_data(post_data)) 2 opener.open(req)
技术改变未来
【推荐】还在用 ECharts 开发大屏?试试这款永久免费的开源 BI 工具!
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步