会员
周边
众包
新闻
博问
闪存
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
awake006
博客园
首页
新随笔
联系
订阅
管理
2018年3月20日
代理服务器的设置
摘要: 使用同一个IP去爬取同一个网站的网页,久了之后容易被屏蔽,这时候我们就需要代理服务器了,到这里http://www.xicidaili.com/ 我们可以查看到很多代理服务器地址。 在python的urllib库中,我们可以这样使用代理服务器访问我们需要访问的站点。 requests库使用代理 首先
阅读全文
posted @ 2018-03-20 14:53 awake006
阅读(414)
评论(0)
推荐(0)
编辑
公告