会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
chips
爱编程,更爱路飞。
博客园
首页
新随笔
联系
订阅
管理
2017年8月27日
Python爬虫之爬取西刺免费IP并保存到MySQL
摘要: 最近在学习scrapy爬虫框架,刚开始爬取简单网页的图片(妹子图)保存到本地,之后这已经满足不了我了,后来开始爬取大型网站,也会用selenium模拟浏览器操作,以及获取ajax网页数据,在爬取过程中,我发现偶尔会出现一些302错误以及操作频繁的反爬虫策略。所以该文就是来爬取大量免费IP来伪装,从而
阅读全文
posted @ 2017-08-27 17:01 chipsKe
阅读(1089)
评论(0)
推荐(0)
编辑
公告