会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
fjc0000
博客园
首页
新随笔
联系
管理
订阅
2019年2月15日
python每日一题:使用代理服务器爬虫
摘要: proxy的应用主要是由于多次爬虫时,可能造成服务器禁止访问等拒绝操作。使用代理,定时的更换ip,可以较好的避免这一现象。 代理的使用也较简单,建立一个代理类即可。本人使用的服务器网址: https://www.xicidaili.com/ 当然爬虫时,我们可以使用多个代理ip轮换爬虫来防止服务器拒
阅读全文
posted @ 2019-02-15 17:32 fjc0000
阅读(187)
评论(0)
推荐(0)
编辑
公告